CN111078170B - 显示控制方法、显示控制装置及计算机可读存储介质 - Google Patents

显示控制方法、显示控制装置及计算机可读存储介质 Download PDF

Info

Publication number
CN111078170B
CN111078170B CN201911207699.8A CN201911207699A CN111078170B CN 111078170 B CN111078170 B CN 111078170B CN 201911207699 A CN201911207699 A CN 201911207699A CN 111078170 B CN111078170 B CN 111078170B
Authority
CN
China
Prior art keywords
display area
texture data
image texture
pixel
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911207699.8A
Other languages
English (en)
Other versions
CN111078170A (zh
Inventor
耿如月
聂伟
周统卫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201911207699.8A priority Critical patent/CN111078170B/zh
Priority to US16/843,467 priority patent/US11503207B2/en
Publication of CN111078170A publication Critical patent/CN111078170A/zh
Priority to EP20177825.5A priority patent/EP3828832B1/en
Application granted granted Critical
Publication of CN111078170B publication Critical patent/CN111078170B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1601—Constructional details related to the housing of computer displays, e.g. of CRT monitors, of flat displays
    • G06F1/1605—Multimedia displays, e.g. with integrated or attached speakers, cameras, microphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/18—Image warping, e.g. rearranging pixels individually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/40—Analysis of texture
    • G06T7/41—Analysis of texture based on statistical description of texture
    • G06T7/44—Analysis of texture based on statistical description of texture using image operators, e.g. filters, edge density metrics or local histograms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Probability & Statistics with Applications (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开是关于一种显示控制方法、显示控制装置及计算机可读存储介质。显示控制方法应用于终端，所述终端中包括具有不同像素密度的第一显示区域和第二显示区域，所述显示控制方法包括：提取所述第一显示区域的图像纹理数据；对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域；将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。通过本公开能够实现像素密度不一致的显示区域视觉显示效果一致。

Description

显示控制方法、显示控制装置及计算机可读存储介质
技术领域
本公开涉及显示控制技术领域，尤其涉及一种显示控制方法、显示控制装置及计算机可读存储介质。
背景技术
相关技术中，为提高终端摄像头的拍摄效果，提出屏下摄像头方案。终端中设置有屏下摄像头的显示区域像素密度较低，以便使屏下摄像头拍摄效果具有高透性。设置有屏下摄像头的显示区域的像素密度与其它显示区域像素密度不一致，导致视觉显示效果不一致。
发明内容
为克服相关技术中存在的问题，本公开提供一种显示控制方法、显示控制装置及计算机可读存储介质。
根据本公开实施例的第一方面，提供一种显示控制方法，包括显示控制方法，应用于终端，所述终端中包括具有不同像素密度的第一显示区域和第二显示区域，所述显示控制方法包括：
提取所述第一显示区域的图像纹理数据；对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域；将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。
一种实施方式中，对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域，包括：
对所述第一显示区域中图像纹理数据对应像素点的像素值，映射为所述第二显示区域中设定数量像素点像素值的平均值。
另一种实施方式中，所述设定数量像素点依据所述第一显示区域的像素分布和/或所述第二显示区域的像素分布设定得到。
又一种实施方式中，所述第一显示区域处的像素密度低于所述第二显示区域处的像素密度。
又一种实施方式中，所述第一显示区域为屏下摄像头设置区域；所述第二显示区域为所述屏下摄像头设置区域的相邻显示区域。
又一种实施方式中，提取所述第一显示区域的图像纹理数据，包括：
对所述第一显示区域中的图层进行合成，并基于合成后的图层提取所述第一显示区域的图像纹理数据。
又一种实施方式中，在图形处理器GPU中提取所述第一显示区域的图像纹理数据。
所述对所述图像纹理数据进行像素映射，包括：将在所述GPU中提取到的图像纹理数据通过内存复制到中央处理器CPU中，在所述CPU中对所述图像纹理数据进行像素映射。
将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据，包括：将在所述CPU中进行像素映射后的图像纹理数据通过内存复制到所述GPU中；在所述GPU中将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，所述对所述图像纹理数据进行像素映射，包括：在共享内存中对提取到的图像纹理数据进行像素映射。
将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据，包括：从所述共享内存中获取进行像素映射后的图像纹理数据，将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，提取所述第一显示区域的图像纹理数据之前，所述方法还包括：
确认对显示区域处理为视觉显示效果一致的开启控件已启动。
根据本公开实施例的第二方面，提供一种显示控制装置，应用于终端，所述终端中包括具有不同像素密度的第一显示区域和第二显示区域，所述显示控制装置包括：
提取单元，用于提取所述第一显示区域的图像纹理数据；映射单元，用于对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域；显示单元，用于将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。
一种实施方式中，所述映射单元采用如下方式对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域：
对所述第一显示区域中图像纹理数据对应像素点的像素值，映射为所述第二显示区域中设定数量像素点像素值的平均值。
另一种实施方式中，所述设定数量像素点依据所述第一显示区域的像素分布和/或所述第二显示区域的像素分布设定得到。
又一种实施方式中，所述第一显示区域处的像素密度低于所述第二显示区域处的像素密度。
又一种实施方式中，所述第一显示区域为屏下摄像头设置区域；所述第二显示区域为所述屏下摄像头设置区域的相邻显示区域。
又一种实施方式中，所述提取单元采用如下方式提取所述第一显示区域的图像纹理数据：对所述第一显示区域中的图层进行合成，并基于合成后的图层提取所述第一显示区域的图像纹理数据。
又一种实施方式中，所述提取单元在图形处理器GPU中提取所述第一显示区域的图像纹理数据。
所述映射单元采用如下方式对所述图像纹理数据进行像素映射：
将在所述GPU中提取到的图像纹理数据通过内存复制到中央处理器CPU中，在所述CPU中对所述图像纹理数据进行像素映射。
所述显示单元采用如下方式将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据：
将在所述CPU中进行像素映射后的图像纹理数据通过内存复制到所述GPU中；在所述GPU中将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，所述映射单元采用如下方式对所述图像纹理数据进行像素映射：在共享内存中对提取到的图像纹理数据进行像素映射。
所述显示单元采用如下方式将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据：从所述共享内存中获取进行像素映射后的图像纹理数据，将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，所述显示控制装置还包括确认单元，所述确认单元被配置为：
在所述提取单元提取所述第一显示区域的图像纹理数据之前，确认对显示区域处理为视觉显示效果一致的开启控件已启动。
根据本公开实施例的第三方面，提供一种显示控制装置，该显示控制装置包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为执行上述第一方面或第一方面中任意一种实施方式中所述的显示控制方法。
根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端处理器执行时，使得移动终端能够执行上述第一方面或第一方面中任意一种实施方式中所述的显示控制方法。
本公开的实施例提供的技术方案可以包括以下有益效果：在具有不同像素密度的显示区域的其中一个显示区域内提取图像纹理数据，并对图像纹理数据进行像素映射，得到视觉显示效果一致的显示区域。将提取图像纹理数据的显示区域内的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示，可以使像素密度不一致的显示区域达到一致的视觉显示效果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种屏下摄像头终端显示区域示意图。
图2是根据一示例性实施例示出的一种显示控制方法的流程图。
图3是根据一示例性实施例示出的一种图像纹理数据提取的流程图。
图4是根据一示例性实施例示出的一种显示控制方法的流程图。
图5是根据一示例性实施例示出的一种显示控制装置的框图。
图6是根据一示例性实施例示出的一种装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开提供的显示控制方法应用于具有屏下摄像头的终端中。设置有屏下摄像头的终端中设置有屏下摄像头的显示区域的像素密度与其它显示区域像素密度不一致，如图1所示。图1所示为一种具有屏下摄像头的终端中像素密度分布示意图。图1中，各数值表示区域密度。“pixel”为像素单位。参阅图1所示，显示区域A为设置有屏下摄像头的显示区域。显示区域B为与显示区域A相邻的其它显示区域。显示区域A为了保持拍摄效果具有高透性，像素密度较低。显示区域B为终端正常显示的区域，像素密度较高。显示区域A和显示区域B像素密度不一致，导致显示区域A和显示区域B的视觉显示效果不一致，给终端使用者的视觉效果也不一样，用户体验较差。
有鉴于此，本公开针对终端上具有不同像素密度的不同显示区域出现视觉显示效果不一致的问题，提供一种显示控制方法，在具有不同像素密度的显示区域的其中一个显示区域内提取图像纹理数据，并对图像纹理数据进行像素映射，得到视觉显示效果一致的显示区域。将提取图像纹理数据的显示区域内的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示，可以使像素密度不一致的显示区域达到一致的视觉显示效果。
本公开为描述方便，将具有不同像素密度的显示区域称为第一显示区域和第二显示区域。以提取图像纹理数据的显示区域为第一显示区域为例进行说明。对于提取第二显示区域的图像纹理数据的实施过程相类似，本公开不进行详细描述。
图2是根据一示例性实施例示出的一种显示控制方法的流程图，如图2所示，显示控制方法用于终端中，终端中包括具有不同像素密度的第一显示区域和第二显示区域，包括以下步骤S11至步骤S13。
在步骤S11中，提取第一显示区域的图像纹理数据。
在步骤S12中，对图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域。
在步骤S13中，将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。
本公开中，通过提取图像纹理数据并对图像纹理数据进行像素映射，实现将像素密度不一致的显示区域达到一致的视觉显示效果。进一步的，由于未更改显示区域的像素密度，故仍能保持各像素密度对应显示区域的原有功能需求。例如，对于高透性拍摄需求的屏下摄像头对应像素密度较低的显示区域，在进行拍摄时仍可以达到对应的拍摄效果，而在进行显示时能够达到与其它显示区域一致的视觉显示效果。
本公开实施例以下结合实际应用对上述实施例涉及的显示控制方法进行说明。
本公开可在包括具有不同像素密度的显示区域中随机选择一个用于提取图像纹理数据的显示区域作为第一显示区域，并进行图像纹理数据的提取以及像素映射。一种实施方式中，在诸如屏下摄像头高透显示区域应用场景中，像素密度较低的显示区域相对像素密度较高的显示区域而言区域面积相对较小，故对于像素密度较低的显示区域进行像素映射操作更容易，进而本公开实施例中可选择像素密度较低的显示区域作为进行图像纹理数据的提取以及像素映射的第一显示区域，即本公开中进行图像纹理数据的提取以及像素映射的第一显示区域的像素密度低于第二显示区域处的像素密度。当然，本公开实施例并不局限于此种方式，例如仍可选择像素密度较高的显示区域进行图像纹理数据的提取以及像素映射。
本公开实施例上述涉及的第一显示区域和第二显示区域可以为相邻的显示区域，以更好的对相邻显示区域视觉显示效果不一致导致的用户体验较差的情形进行改观。
本公开一示例中，第一显示区域可以为屏下摄像头设置区域，第二显示区域为屏下摄像头设置区域的相邻显示区域。例如，图1中，第一显示区域可以为显示区域A，第二显示区域可以为显示区域2。
进一步的，本公开上述实施例中涉及的对第一显示区域的图像纹理数据提取时，可采用图3所示的方式进行图像纹理数据的提取。
图3所示为本公开一示例性实施例提供的一种图像纹理数据提取方法流程图。参阅图3所示，包括如下步骤S111和步骤S112。
在步骤S111中，对第一显示区域中的图层进行合成。
在步骤S112中，基于合成后的图层提取第一显示区域的图像纹理数据。
本公开中，显示区域中通常会有多个图层，例如在图1所示的屏下摄像头显示区域A中可能会有状态栏、桌面和壁纸等图层。由于显示区域中视觉显示效果为显示区域中需要显示的所有图层最终的视觉显示效果，故本公开为了能更好的表征显示区域的视觉显示效果，对第一显示区域中所包含所有显示的图层进行合成，基于合成后的图层提取第一显示区域的图像纹理数据。
本公开中，在进行图层合成时，可以根据图层的层级在帧缓存(Frame Buffer)按照层级低的在下，层级高的在上的原则进行合成。
可以理解的是，本公开中对于图层合成以及图像纹理数据提取的过程可参考已有技术，本公开不再详述。
本公开实施例中，可在图形处理器(Graphics Processing Unit，GPU)中进行图层的合成以及图像纹理数据的提取。
由于GPU是做并行计算的，整行进行处理。本公开实施例中进行像素映射时是对于一行中某些列进行处理的，故本公开中在对GPU中提取的图像纹理数据进行像素映射时，可采用图4所示的方式进行显示控制。
图4是根据一示例性实施例示出的一种显示控制方法流程图。参阅图4所示，包括如下步骤。
在步骤S21中，在GPU中对第一显示区域中显示的所有图层进行合成。
在步骤S22中，在GPU中基于合成的图层提取第一显示区域的图像纹理数据。
在步骤S23中，将在GPU中提取到的图像纹理数据通过内存复制到中央处理器(central processing unit，CPU)中。
在步骤S24中，在CPU中对图像纹理数据进行像素映射。
在步骤S25中，在进行显示时，将在CPU中进行像素映射后的图像纹理数据通过内存复制到GPU中。
在步骤S26中，在GPU中将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
在步骤S27中，在第一显示区域内显示进行像素映射后的图像纹理数据。
本公开实施例中通过GPU进行图层合成以及图像纹理数据的提取，在CPU中进行像素映射，并通过内存复制的方式实现像素映射以及图像纹理数据的更新，进而实现在不更改像素密度的情况下实现像素密度不一致的多个显示区域之间视觉显示效果一致。
本公开又一实施例中，为减少CPU与GPU之间进行内存复制的方式，提高显示控制效率，可采用在共享内存中对提取到的图像纹理数据进行像素映射。从共享内存中获取进行像素映射后的图像纹理数据，将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
进一步的，本公开上述实施例中在对提取的图像纹理数据进行像素映射时，采用预设的像素映射策略进行像素映射，以得到视觉显示效果一致的显示区域。
其中，像素映射策略可以是出厂设置的默认策略。例如，可采用像素均值替代映射的方式，也可以采用模糊处理的方式，本公开实施例不做限定。
一种实施方式中，采用像素均值替代映射的方式时，例如可以是将第一显示区域中图像纹理数据对应像素点的像素值，映射为第二显示区域中设定数量像素点像素值的平均值。
其中，用于映射第一区域图像纹理数据对应像素点的像素值所用的第二显示区域中的像素点可以是预设的出厂值。例如可以是屏幕厂商根据屏幕像素分布自行设置。
一示例中，本公开依据第一显示区域的像素分布以及第二显示区域的像素分布，预先设定第一显示区域中像素点位置与第二显示区域像素点位置的对应位置关系。针对第一显示区域中每一像素点的像素值，可以映射为第二显示区域中与像素点位置对应位置处设定数量像素点的像素平均值。例如，对于分辨率为1080p的屏幕，预设第一显示区域中像素坐标为(1,530)的像素点，与第二显示区域中像素坐标分别为(1,518)、(1,519)、(1,520)三个像素点具有对应位置关系，故，在应用本公开实施例涉及的像素映射方法时，可以将第一显示区域中(1,530)的像素值映射为第二显示区域中(1,518)、(1,519)、(1,520)三个像素点的像素值做平均后的像素均值。
更进一步的，本公开上述实施例中进行像素映射时为提高映射准确性，可以像素帧为单位进行像素映射。
其中，进行像素映射时，需要对每一像素帧帧都要处理，故对终端的性能要求较高，进而可能会对终端中运行的其它功能产生一定影响。例如，对于帧率要求比较高的场景(例如游戏的高帧率模式)，将会影响帧率要求较高程序的运行。有鉴于此，本公开实施例中可设置一开启控件，通过开启控件的启动或关闭实现是否对显示区域处理为视觉显示效果一致的控制。在开启控件开启时，则执行图像纹理数据提取，像素映射以及图像纹理数据更新和显示的上述显示控制方法。在开启控件关闭时，则不执行本公开实施例上述涉及的显示控制方法。其中，开启控件的启动或关闭可以由用户设置，也可以由终端根据运行应用程序所实现的具体应用场景进行控制。例如，对于上述帧率要求比较高的游戏场景中，可关闭开启控件。
基于相同的构思，本公开实施例还提供一种显示控制装置。
可以理解的是，本公开实施例提供的显示控制装置为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。结合本公开实施例中所公开的各示例的单元及算法步骤，本公开实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同的方法来实现所描述的功能，但是这种实现不应认为超出本公开实施例的技术方案的范围。
图5是根据一示例性实施例示出的一种显示控制装置框图。参照图2，该显示控制装置100应用于终端，终端中包括具有不同像素密度的第一显示区域和第二显示区域。显示控制装置100可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参阅图5所示，显示控制装置100包括提取单元101，映射单元102和显示单元103。
提取单元101，用于提取第一显示区域的图像纹理数据。映射单元102，用于对图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域。显示单元103，用于将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。
一种实施方式中，第一显示区域处的像素密度低于第二显示区域处的像素密度。
另一种实施方式中，第一显示区域为屏下摄像头设置区域；第二显示区域为屏下摄像头设置区域的相邻显示区域。
又一种实施方式中，提取单元101采用如下方式提取第一显示区域的图像纹理数据：对第一显示区域中的图层进行合成，并基于合成后的图层提取第一显示区域的图像纹理数据。
又一种实施方式中，提取单元101在图形处理器GPU中提取第一显示区域的图像纹理数据。
映射单元102将在GPU中提取到的图像纹理数据通过内存复制到中央处理器CPU中，在CPU中对图像纹理数据进行像素映射。
显示单元103将在CPU中进行像素映射后的图像纹理数据通过内存复制到GPU中；在GPU中将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，映射单元102在共享内存中对提取到的图像纹理数据进行像素映射。显示单元103从共享内存中获取进行像素映射后的图像纹理数据，将第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
又一种实施方式中，显示控制装置100还包括确认单元104，确认单元104被配置为：在提取单元101提取第一显示区域的图像纹理数据之前，确认对显示区域处理为视觉显示效果一致的开启控件已启动。
又一种实施方式中，映射单元102采用如下方式对图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域：
将所述第一显示区域中图像纹理数据对应像素点的像素值，映射为所述第二显示区域中设定数量像素点像素值的平均值。
又一种实施方式中，所述设定数量像素点依据所述第一显示区域的像素分布和/或所述第二显示区域的像素分布设定得到。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图6是根据一示例性实施例示出的一种用于显示控制的装置1000的框图。例如，装置1000可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图6，装置1000可以包括以下一个或多个组件：处理组件1002，存储器1004，电力组件1006，多媒体组件1008，音频组件1010，输入/输出(I/O)的接口1012，传感器组件1014，以及通信组件1016。
处理组件1002通常控制装置1000的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1002可以包括一个或多个处理器1020来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1002可以包括一个或多个模块，便于处理组件1002和其他组件之间的交互。例如，处理组件1002可以包括多媒体模块，以方便多媒体组件1008和处理组件1002之间的交互。
存储器1004被配置为存储各种类型的数据以支持在设备1000的操作。这些数据的示例包括用于在装置1000上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1004可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电力组件1006为装置1000的各种组件提供电力。电力组件1006可以包括电源管理系统，一个或多个电源，及其他与为装置1000生成、管理和分配电力相关联的组件。
多媒体组件1008包括在装置1000和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1008包括一个前置摄像头和/或后置摄像头。当设备1000处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1010被配置为输出和/或输入音频信号。例如，音频组件1010包括一个麦克风(MIC)。当装置1000处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1004或经由通信组件1016发送。在一些实施例中，音频组件1010还包括一个扬声器，用于输出音频信号。
I/O接口1012为处理组件1002和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1014包括一个或多个传感器，用于为装置1000提供各个方面的状态评估。例如，传感器组件1014可以检测到设备1000的打开/关闭状态，组件的相对定位，例如所述组件为装置1000的显示器和小键盘，传感器组件1014还可以检测装置1000或装置1000一个组件的位置改变，用户与装置1000接触的存在或不存在，装置1000方位或加速/减速和装置1000的温度变化。传感器组件1014可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1014还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1014还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件1016被配置为便于装置1000和其他设备之间有线或无线方式的通信。装置1000可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件1016经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件1016还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置1000可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1004，上述指令可由装置1000的处理器1020执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
可以理解的是，术语“第一”、“第二”等用于描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开，并不表示特定的顺序或者重要程度。实际上，“第一”、“第二”等表述完全可以互换使用。例如，在不脱离本公开范围的情况下，第一显示区域也可以被称为第二显示区域，类似地，第二显示区域也可以被称为第一显示区域。
进一步可以理解的是，本公开实施例中尽管在附图中以特定的顺序描述操作，但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作，或是要求执行全部所示的操作以得到期望的结果。在特定环境中，多任务和并行处理可能是有利的。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (18)

1.一种显示控制方法，其特征在于，应用于终端，所述终端中包括具有不同像素密度的第一显示区域和第二显示区域，所述显示控制方法包括：
提取所述第一显示区域的图像纹理数据；
对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域；将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示；
其中，对所述第一显示区域中图像纹理数据对应像素点的像素值，映射为所述第二显示区域中设定数量像素点像素值的平均值。
2.根据权利要求1所述的显示控制方法，其特征在于，所述设定数量像素点依据所述第一显示区域的像素分布和/或所述第二显示区域的像素分布设定得到。
3.根据权利要求1所述的显示控制方法，其特征在于，所述第一显示区域处的像素密度低于所述第二显示区域处的像素密度。
4.根据权利要求3所述的显示控制方法，其特征在于，所述第一显示区域为屏下摄像头设置区域；
所述第二显示区域为所述屏下摄像头设置区域的相邻显示区域。
5.根据权利要求1所述的显示控制方法，其特征在于，提取所述第一显示区域的图像纹理数据，包括：
对所述第一显示区域中的图层进行合成，并基于合成后的图层提取所述第一显示区域的图像纹理数据。
6.根据权利要求5所述的显示控制方法，其特征在于，在图形处理器GPU中提取所述第一显示区域的图像纹理数据；
所述对所述图像纹理数据进行像素映射，包括：
将在所述GPU中提取到的图像纹理数据通过内存复制到中央处理器CPU中，在所述CPU中对所述图像纹理数据进行像素映射；
将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据，包括：
将在所述CPU中进行像素映射后的图像纹理数据通过内存复制到所述GPU中；
在所述GPU中将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
7.根据权利要求5所述的显示控制方法，其特征在于，所述对所述图像纹理数据进行像素映射，包括：
在共享内存中对提取到的图像纹理数据进行像素映射；
将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据，包括：
从所述共享内存中获取进行像素映射后的图像纹理数据，将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
8.根据权利要求1至7中任意一项所述的显示控制方法，其特征在于，提取所述第一显示区域的图像纹理数据之前，所述方法还包括：
确认对显示区域处理为视觉显示效果一致的开启控件已启动。
9.一种显示控制装置，其特征在于，应用于终端，所述终端中包括具有不同像素密度的第一显示区域和第二显示区域，所述显示控制装置包括：
提取单元，用于提取所述第一显示区域的图像纹理数据；
映射单元，用于对所述图像纹理数据进行像素映射，得到视觉显示效果一致的第一显示区域和第二显示区域；其中，将所述第一显示区域中图像纹理数据对应像素点的像素值，映射为所述第二显示区域中设定数量像素点像素值的平均值；
显示单元，用于将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据并进行显示。
10.根据权利要求9所述的显示控制装置，其特征在于，所述设定数量像素点依据所述第一显示区域的像素分布和/或所述第二显示区域的像素分布设定得到。
11.根据权利要求9所述的显示控制装置，其特征在于，所述第一显示区域处的像素密度低于所述第二显示区域处的像素密度。
12.根据权利要求11所述的显示控制装置，其特征在于，所述第一显示区域为屏下摄像头设置区域；
所述第二显示区域为所述屏下摄像头设置区域的相邻显示区域。
13.根据权利要求9所述的显示控制装置，其特征在于，所述提取单元采用如下方式提取所述第一显示区域的图像纹理数据：
对所述第一显示区域中的图层进行合成，并基于合成后的图层提取所述第一显示区域的图像纹理数据。
14.根据权利要求13所述的显示控制装置，其特征在于，所述提取单元在图形处理器GPU中提取所述第一显示区域的图像纹理数据；
所述映射单元采用如下方式对所述图像纹理数据进行像素映射：
将在所述GPU中提取到的图像纹理数据通过内存复制到中央处理器CPU中，在所述CPU中对所述图像纹理数据进行像素映射；
所述显示单元采用如下方式将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据：
将在所述CPU中进行像素映射后的图像纹理数据通过内存复制到所述GPU中；
在所述GPU中将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
15.根据权利要求13所述的显示控制装置，其特征在于，所述映射单元采用如下方式对所述图像纹理数据进行像素映射：
在共享内存中对提取到的图像纹理数据进行像素映射；
所述显示单元采用如下方式将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据：
从所述共享内存中获取进行像素映射后的图像纹理数据，将所述第一显示区域的图像纹理数据更新为进行像素映射后的图像纹理数据。
16.根据权利要求9至15任意一项所述的显示控制装置，其特征在于，所述显示控制装置还包括确认单元，所述确认单元被配置为：
在所述提取单元提取所述第一显示区域的图像纹理数据之前，确认对显示区域处理为视觉显示效果一致的开启控件已启动。
17.一种显示控制装置，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行权利要求1至8中任意一项所述的显示控制方法。
18.一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行权利要求1至8中任意一项所述的显示控制方法。
CN201911207699.8A 2019-11-29 2019-11-29 显示控制方法、显示控制装置及计算机可读存储介质 Active CN111078170B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201911207699.8A CN111078170B (zh) 2019-11-29 2019-11-29 显示控制方法、显示控制装置及计算机可读存储介质
US16/843,467 US11503207B2 (en) 2019-11-29 2020-04-08 Display control method, display control device and computer-readable storage medium
EP20177825.5A EP3828832B1 (en) 2019-11-29 2020-06-02 Display control method, display control device and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911207699.8A CN111078170B (zh) 2019-11-29 2019-11-29 显示控制方法、显示控制装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN111078170A CN111078170A (zh) 2020-04-28
CN111078170B true CN111078170B (zh) 2023-11-28

Family

ID=70312245

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911207699.8A Active CN111078170B (zh) 2019-11-29 2019-11-29 显示控制方法、显示控制装置及计算机可读存储介质

Country Status (3)

Country Link
US (1) US11503207B2 (zh)
EP (1) EP3828832B1 (zh)
CN (1) CN111078170B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4182751A1 (en) 2020-07-16 2023-05-24 Lusospace, Projectos Engenharia Lda Head-mounted display device
CN114078101A (zh) * 2020-08-11 2022-02-22 中兴通讯股份有限公司 图像显示方法、电子设备及计算机可读存储介质
US20240112312A1 (en) * 2021-03-08 2024-04-04 Google Llc Motion-Induced Blurring to Reduce Scintillations and an Appearance of a Boundary Separating Regions of a Display
CN116486759B (zh) * 2023-04-11 2024-01-30 艺壹佳文化科技(广东)有限公司 一种标识显示智能调节方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812569A (zh) * 2005-12-30 2006-08-02 浙江工业大学 基于全方位视觉传感器的智能安保装置
CN109036245A (zh) * 2018-07-26 2018-12-18 京东方科技集团股份有限公司 一种显示处理的方法、装置、集成电路及计算机存储介质
WO2019006749A1 (zh) * 2017-07-07 2019-01-10 华为技术有限公司 一种具有摄像头的终端和拍摄方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101784216B1 (ko) 2011-02-14 2017-10-12 삼성디스플레이 주식회사 보상 테이블 생성 시스템, 휘도 보상 테이블을 갖는 표시 장치 및 보상 테이블 생성방법
US10140909B2 (en) * 2015-09-14 2018-11-27 Japan Display Inc. Display device
US9864400B2 (en) * 2015-10-30 2018-01-09 Essential Products, Inc. Camera integrated into a display
US10713752B2 (en) 2017-06-09 2020-07-14 Sony Interactive Entertainment Inc. Temporal supersampling for foveated rendering systems
CN109308866A (zh) * 2018-10-26 2019-02-05 武汉华星光电半导体显示技术有限公司 一种电子装置
CN110767147B (zh) * 2019-10-30 2022-09-09 武汉天马微电子有限公司 一种显示面板的显示方法、显示面板和显示装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812569A (zh) * 2005-12-30 2006-08-02 浙江工业大学 基于全方位视觉传感器的智能安保装置
WO2019006749A1 (zh) * 2017-07-07 2019-01-10 华为技术有限公司 一种具有摄像头的终端和拍摄方法
CN109036245A (zh) * 2018-07-26 2018-12-18 京东方科技集团股份有限公司 一种显示处理的方法、装置、集成电路及计算机存储介质

Also Published As

Publication number Publication date
US11503207B2 (en) 2022-11-15
EP3828832A1 (en) 2021-06-02
CN111078170A (zh) 2020-04-28
EP3828832B1 (en) 2023-08-23
US20210168282A1 (en) 2021-06-03

Similar Documents

Publication Publication Date Title
CN111078170B (zh) 显示控制方法、显示控制装置及计算机可读存储介质
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
CN105095881B (zh) 人脸识别方法、装置及终端
CN107341777B (zh) 图片处理方法及装置
CN107330868B (zh) 图片处理方法及装置
CN107967459B (zh) 卷积处理方法、装置及存储介质
CN111611034A (zh) 屏幕显示调节方法、装置及存储介质
US11600300B2 (en) Method and device for generating dynamic image
CN107730443B (zh) 图像处理方法、装置及用户设备
CN107437269B (zh) 一种处理图片的方法及装置
CN115914721A (zh) 直播画面处理方法、装置、电子设备及存储介质
EP3905660A1 (en) Method and device for shooting image, and storage medium
CN109389547B (zh) 图像显示方法及装置
CN110312117B (zh) 数据刷新方法及装置
CN114827721A (zh) 视频特效处理方法、装置、存储介质及电子设备
CN108874482B (zh) 图像处理方法及装置
CN107967233B (zh) 电子作品显示方法和装置
CN113810675A (zh) 图像处理方法、装置、设备及存储介质
CN114418865A (zh) 图像处理方法、装置、设备及存储介质
CN110876013B (zh) 确定图像分辨率的方法及装置、电子设备及存储介质
CN110876015B (zh) 确定图像分辨率的方法及装置、电子设备及存储介质
CN110955328B (zh) 电子设备的控制方法、装置及存储介质
US20220291890A1 (en) Method for interaction between devices and medium
CN111081143B (zh) 显示控制方法、装置、电子设备和计算机可读存储介质
CN116661633A (zh) 截图方法、截图装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant