CN113840174B - 图像显示方法、系统及存储介质 - Google Patents

图像显示方法、系统及存储介质 Download PDF

Info

Publication number
CN113840174B
CN113840174B CN202111117066.5A CN202111117066A CN113840174B CN 113840174 B CN113840174 B CN 113840174B CN 202111117066 A CN202111117066 A CN 202111117066A CN 113840174 B CN113840174 B CN 113840174B
Authority
CN
China
Prior art keywords
spi
partition
difference data
image frame
storage area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111117066.5A
Other languages
English (en)
Other versions
CN113840174A (zh
Inventor
郑超
苗京花
范清文
郝帅
张�浩
陈丽莉
姜倩文
孙宾华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd, Beijing BOE Display Technology Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202111117066.5A priority Critical patent/CN113840174B/zh
Publication of CN113840174A publication Critical patent/CN113840174A/zh
Application granted granted Critical
Publication of CN113840174B publication Critical patent/CN113840174B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/393Arrangements for updating the contents of the bit-mapped memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4383Accessing a communication channel
    • H04N21/4384Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本申请实施例提供了图像显示方法、系统及存储介质,获取待显示的目标图像帧;将目标图像帧与目标图像帧的上一帧图像帧进行比对,得到差异数据及差异数据的附加地址信息;根据差异数据及附加地址信息,按照各串行外设接口SPI分区划分差异数据,分别得到各SPI分区的变更数据;针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,以使显示器在上一帧图像帧显示的基础上,采用局部刷新的方式在各SPI分区中刷新显示变更数据。针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,可以减少显示器接收的图像数据的数据量,从而减少采用SPI通信方式的显示器的画面卡顿及延时的情况。

Description

图像显示方法、系统及存储介质
技术领域
本申请涉及图像显示技术领域,特别是涉及图像显示方法、系统及存储介质。
背景技术
SPI(Serial Peripheral Interface,串行外设接口)是一种高速的全双工同步通信总线,并且在芯片的管脚上只占用四根线,能够节约芯片的管脚,为PCB(PrintedCircuit Board,印制电路板)的布局节省空间。当前部分中小尺寸显示器出于成本考虑,并没有采用成本较高的MIPI(Mobile Industry Processor Interface,移动产业处理器接口)进行通信,而是采用了成本较低的SPI通信方式。但是SPI通信存在传输带宽低的问题,采用SPI通信方式会出现显示器画面卡顿及延时的情况。
发明内容
本申请实施例的目的在于提供一种图像显示方法、系统及存储介质,以减少采用SPI通信方式的显示器的画面卡顿及延时的情况。具体技术方案如下:
第一方面,本申请实施例提供了一种图像显示方法,所述方法包括:
获取待显示的目标图像帧;
将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息;
根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据;
针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,以使所述显示器在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
在一种可能的实施方式中,所述获取待显示的目标图像帧,包括:
获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
在一种可能的实施方式中,所述将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息,包括:
将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据;
针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息。
在一种可能的实施方式中,所述图像显示方法应用于包括应用处理器的系统,所述根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据,包括:
根据各SPI分区与地址的对应关系,应用处理器基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
在一种可能的实施方式中,所述针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,包括:
利用通用输入与输出GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
在一种可能的实施方式中,所述图像显示方法应用于包括应用处理器及微控制单元的系统,在所述将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息之后,所述方法还包括:
应用处理器将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域;
在所述根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据之后,所述方法还包括:
所述应用处理器将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域;
所述应用处理器将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
在一种可能的实施方式中,所述应用处理器中运行有算法前处理线程、重排序线程及传送线程,所述方法还包括:
所述算法前处理线程获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;
所述算法前处理线程将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域;
所述重排序线程根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据;
所述重排序线程将各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域;
在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,所述重排序线程解锁所述第四存储区域。
第二方面,本申请实施例通过了一种图像显示系统,包括:
应用处理器、微控制单元及基于串行外设接口SPI通信方式的显示器;
所述应用处理器,用于获取待显示的目标图像帧;将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息;根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据;将各所述SPI分区的变更数据发送给所述微控制单元;
所述微控制单元,用于针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区;
所述显示器,用于在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
在一种可能的实施方式中,所述应用处理器,具体用于:获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
在一种可能的实施方式中,所述应用处理器,具体用于:将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据;针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息。
在一种可能的实施方式中,所述应用处理器,具体用于:根据各SPI分区与地址的对应关系,基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
在一种可能的实施方式中,所述微控制单元,具体用于:微控制单元利用通用输入与输出GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
在一种可能的实施方式中,所述应用处理器,还用于:将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域;将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域;将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
在一种可能的实施方式中,所述应用处理器中运行有算法前处理线程、重排序线程及传送线程;
所述算法前处理线程,用于获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域;
所述重排序线程,用于根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据;各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域;在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,解锁所述第四存储区域。
第三方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现本申请中任一所述的图像显示方法。
本申请实施例有益效果:
本申请实施例提供的图像显示方法、系统及存储介质,获取待显示的目标图像帧;将目标图像帧与目标图像帧的上一帧图像帧进行比对,得到差异数据及差异数据的附加地址信息;根据差异数据及附加地址信息,按照各串行外设接口SPI分区划分差异数据,分别得到各SPI分区的变更数据;针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,以使显示器在上一帧图像帧显示的基础上,采用局部刷新的方式在各SPI分区中刷新显示变更数据。针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,从而可以减少显示器接收的图像数据的数据量,从而减少采用SPI通信方式的显示器的画面卡顿及延时的情况。当然,实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1为本申请实施例的图像显示方法的第一种示意图;
图2为本申请实施例的图像显示方法的第二种示意图;
图3为本申请实施例的微控制单元模拟SPI的一种示意图;
图4为本申请实施例的图像显示方法的第三种示意图;
图5为本申请实施例的应用处理器工作流程的一种示意图;
图6为本申请实施例的图像显示系统的第三种示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员基于本申请所获得的所有其他实施例,都属于本申请保护的范围。
相关技术中,为了降低成本,显示器采用了成本较低的SPI通信方式,但是SPI通信存在传输带宽低的问题,导致显示器容易出现画面卡顿及延时的情况。
为了解决上述问题,本申请实施例提供了一种图像显示方法,参见图1,所述方法包括:
S101,获取待显示的目标图像帧。
视频是以图像帧(也称为视频帧)的形式进行显示的,一个例子中,目标图像帧为视频中当前需要处理的视频帧。一个例子中,还可以对视频中当前需要处理的视频帧进行格式转换,以减少图像的数据量。
在一种可能的实施方式中,所述获取待显示的目标图像帧,包括:获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
一个例子中,原始图像帧的格式为RGB888,则可以将原始图像帧的格式转换为RGB565,从而得到目标图像帧。格式转换后的目标图像帧的格式可以根据实际情况自定义选择,但是需要保证目标图像帧的数据量小于原始图像帧的数据量,从而减少基于SPI通信方式的显示器接收到的图像帧的数据量,能够减少采用SPI通信方式的显示器的画面卡顿及延时的情况。
S102,将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息。
将目标图像帧与目标图像帧的上一帧图像帧进行比对,得到二者中存在差异的差异数据,以及差异数据的附加地址信息。
一个例子中,可以将像素作为差异数据的基本单位;在目标图像帧与目标图像帧的上一帧图像帧中选取相同位置的像素进行比较,针对每一位置,若该位置上两个像素的像素值不相同,则将目标图像帧中该位置像素的像素值作为差异数据,并将该位置像素的坐标作为相应差异数据的附加地址信息。
一个例子中,可以将一行像素或一列像素作为差异数据的基本单位;在一种可能的实施方式中,所述将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息,包括:
步骤一,将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据。
步骤二,针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息。
将目标图像帧与目标图像帧的上一帧图像帧逐列进行比对,将存在区别的列(目标图像帧中的列)作为差异数据,从而得到按列划分的各差异数据;针对每一差异数据,将该差异数据对应的列作为该差异数据的附加地址信息。例如,目标图像帧与目标图像帧的上一帧图像帧的第n列像素存在区别,则将目标图像帧中的第n列像素作为差异数据,该差异数据的附加地址信息为n。
一般情况下,SPI是以列为单位进行数据传输的,本申请实施例中,按列划分的差异数据,并将差异数据所对应的列作为该差异数据的附加地址信息,更能够适应SPI以列为单位进行数据传输的特点,从而能够实现基于SPI通信方式的显示器以列为单位进行显示图像的刷新,更加适用于基于SPI通信方式的显示器的显示场景。
S103,根据所述差异数据及所述附加地址信息,按照各SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
每个SPI分区均对应有各自的地址,例如SPI分区A对应第1列至第i列的像素,SPI分区B对应第i+1列至第2i列的像素等。基于各差异数据的附加地址信息以及各SPI分区各自的地址,可以得到每个SPI分区中的差异数据,称为SPI分区的变更数据。
S104,针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,以使所述显示器在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,显示器中的该SPI分区在上一帧图像帧显示的基础上,采用局部刷新的方式,仅在SPI分区中刷新显示该分区的变更数据,而该SPI分区中除变更数据外的其他数据则继续显示上一帧图像帧中的内容。
一个例子中,可以直接利用SPI接口向显示器发送SPI分区的变更数据。一个例子中,可以利用GPIO(General-Purpose Input/Output,通用输入与输出)接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
以原始图像帧的格式为RGB888,目标图像帧的格式为RGB565为例,假设原始图像帧的数据量为A*B*3*8(bit),其中,A*B表示分辨率,则显示器接收到的数据量的范围为:0bit至[A*B*(5+5+6)+2*8*B]bit,其中,0bit为目标图像帧与其上一帧图像帧完全相同时不存在差异数据;[A*B*(5+5+6)+2*8*B]bit为目标图像帧与其上一帧图像帧完全不同,目标图像帧中全部为差异数据,A*B*(5+5+6)表示该情况下变更数据的总数据量,2*8*B表示附加地址信息的总数据量。以最差的情况计算,即目标图像帧中全部为差异数据,则减少的数据量为:1-[A*B*(5+5+6)+2*8*B]/(A*B*3*8),假设分辨率为768*1024,则减少的数据量为:33.24%,若差异数据较少,则减少的数据量更多。
在本申请实施例中,得到各SPI分区的变更数据,针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,从而可以减少显示器接收的图像数据的数据量,从而减少采用SPI通信方式的显示器的画面卡顿及延时的情况。
在一种可能的实施方式中,参见图2,所述根据所述差异数据及所述附加地址信息,按照各SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据,包括:
S201,根据各SPI分区与地址的对应关系,应用处理器(Application Processor)基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
所述方法还包括:
S202,应用处理器向微控制单元发送各所述SPI分区的变更数据。
一个例子中,应用处理器与微控制单元之间可以通过USB(Universal SerialBus,通用串行总线)传输各SPI分区的变更数据。
相关技术中,在应用处理器接收到视频帧数据后,会直接将视频帧数据发送给微控制单元,微控制单元再将视频帧数据进行SPI分区重排序,然后发送到显示器进行扫描显示。SPI分区重排序工作由微控制单元承担,如果数据量大,微控制单元将花费大量的处理时间,从而导致显示器容易出现画面卡顿及延时的情况,而在本申请实施例中,利用应用处理器进行SPI分区差异数据的划分,而应用处理器的数据处理能力是要强于微控制单元的数据处理能力的,从而可以减少SPI分区差异数据的划分耗时,降低每帧的图像处理耗时,最终提高显示器刷新率,能够减少显示器画面卡顿及延时的情况。
所述针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,包括:
S203,微控制单元利用GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
标准的SPI包含四条信号线,即MISO(主设备数据输入信号)、MOSI(主设备数据输出信号)、SCLK(时钟信号)、CS(片选信号),在高分辨率、高刷新率应用场景下,多路SPI的信号会浪费不必要的微控制单元硬件资源;在本申请实施例中的多路SPI通过微控制单元的GPIO接口以软件编程方式模拟SPI时序,从而实现向显示器的SPI传输数据。一个例子中,如图3所示,各路SPI的CS多路复用,摒弃MISO,每路SPI只需单独设置SCLK和MOSI即可,大大降低了多路SPI对硬件资源的占用情况,从而减少能够提高微控制单元的处理速度,降低微控制单元的硬件成本。
在一种可能的实施方式中,参见图4,在所述将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息之后,所述方法还包括:
S401,应用处理器将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域。
在所述根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据之后,所述方法还包括:
S402,所述应用处理器将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域。
S403,所述应用处理器将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
一个例子中,应用处理器中运行有算法前处理线程、重排序线程及传送线程,算法前处理线程用于图像帧的前处理,包括格式转换、确定差异数据及附加地址信息等;重排序线程用于SPI重排序,包括确定各SPI分区的变更数据等;传送线程用于将各SPI分区的变更数据传输给微控制单元等。
一个例子中,算法前处理线程还负责第一存储区域的加解锁,重排序线程还负责第二存储区域的加解锁。具体的,在算法前处理线程将差异数据及附加地址信息存储在第一存储区域中后,算法前处理线程锁定第一存储区域;重排序线程将各SPI分区的变更数据存储到第二存储区域中后,重排序线程锁定第二存储区域,算法前处理线程则解锁第一存储区域;传送线程将第二存储区域的各SPI分区的变更数据发送给微控制单元后(接收到微控制单元的接收完毕响应则表示发送完成),重排序线程解锁第二存储区域。
在本申请实施例中,在数据使用完毕前,对数据的存储区域进行锁定,以保证数据的安全性,在数据使用完毕后,解锁数据的存储区域,以释放存储空间,通过对存储区域进行锁定及解锁,提高数据的安全性。
为了提高应用处理器中各线程的处理效率,算法前处理线程、重排序线程及传送线程的加解锁过程具体可以如图5所示。在一种可能的实施方式中,所述方法还包括:
所述算法前处理线程获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;
所述算法前处理线程将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域。
所述重排序线程根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据。
所述重排序线程将各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域。
在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,所述重排序线程解锁所述第四存储区域。
在本申请实施例中,算法前处理线程、重排序线程包含两个图像帧的处理和四个同步锁的控制,算法前处理线程在处理完一图像帧后,在重排序线程处理完该图像帧之前,算法前处理线程可以处理下一图像帧;同样的在重排序线程处理完一图像帧后,在传送线程传送完该图像帧之前,重排序线程可以处理下一图像帧,从而减少算法前处理线程、重排序线程的等待时间,通过这种同步锁线程分离流程,能够最大限度利用应用处理器的资源,提高处理效率。
本申请实施例还提供了一种图像显示系统,参见图6,包括:
应用处理器61、微控制单元62及基于SPI通信方式的显示器63;
所述应用处理器61,用于获取待显示的目标图像帧;将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息;根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据;将各所述SPI分区的变更数据发送给所述微控制单元62;
所述微控制单元62,用于针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区;
所述显示器63,用于在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
在一种可能的实施方式中,所述应用处理器,具体用于:获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
在一种可能的实施方式中,所述应用处理器,具体用于:将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据;针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息。
在一种可能的实施方式中,所述应用处理器,具体用于:根据各SPI分区与地址的对应关系,基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
在一种可能的实施方式中,所述微控制单元,具体用于:微控制单元利用通用输入与输出GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
在一种可能的实施方式中,所述应用处理器,还用于:将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域;将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域;将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
在一种可能的实施方式中,所述应用处理器中运行有算法前处理线程、重排序线程及传送线程;
所述算法前处理线程,用于获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域;
所述重排序线程,用于根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据;各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域;在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,解锁所述第四存储区域。
本申请实施例还提供了一种计算机可读存储介质,上述计算机可读存储介质内存储有计算机程序,上述计算机程序被处理器执行时实现本申请中任一所述的图像显示方法。一个例子中,处理器可以包括应用处理器及微控制单元。
在本申请提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在电子设备上运行时,使得电子设备执行上述实施例中任一图像显示方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘SolidState Disk(SSD))等。
需要说明的是,在本文中,各个可选方案中的技术特征只要不矛盾均可组合来形成方案,这些方案均在本申请公开的范围内。诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统、电子设备及存储介质的实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。

Claims (13)

1.一种图像显示方法,其特征在于,所述方法包括:
获取待显示的目标图像帧;
将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据;
针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息;
根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据;
针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,以使所述显示器在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
2.根据权利要求1所述的方法,其特征在于,所述获取待显示的目标图像帧,包括:
获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
3.根据权利要求1所述的方法,其特征在于,所述图像显示方法应用于包括应用处理器的系统,所述根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据,包括:
根据各SPI分区与地址的对应关系,应用处理器基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
4.根据权利要求1所述的方法,其特征在于,所述针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区,包括:
利用通用输入与输出GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
5.根据权利要求1所述的方法,其特征在于,所述图像显示方法应用于包括应用处理器及微控制单元的系统,在所述将所述目标图像帧与所述目标图像帧的上一帧图像帧进行比对,得到差异数据及所述差异数据的附加地址信息之后,所述方法还包括:
应用处理器将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域;
在所述根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据之后,所述方法还包括:
所述应用处理器将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域;
所述应用处理器将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
6.根据权利要求5所述的方法,其特征在于,所述应用处理器中运行有算法前处理线程、重排序线程及传送线程,所述方法还包括:
所述算法前处理线程获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;
所述算法前处理线程将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域;
所述重排序线程根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据;
所述重排序线程将各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域;
在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,所述重排序线程解锁所述第四存储区域。
7.一种图像显示系统,其特征在于,包括:
应用处理器、微控制单元及基于串行外设接口SPI通信方式的显示器;
所述应用处理器,用于获取待显示的目标图像帧;将所述目标图像帧与所述目标图像帧的上一帧图像帧逐列进行比对,得到按列划分的各差异数据;针对每一差异数据,将该差异数据所对应的列作为该差异数据的附加地址信息;根据所述差异数据及所述附加地址信息,按照各串行外设接口SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据;将各所述SPI分区的变更数据发送给所述微控制单元;
所述微控制单元,用于针对每一个SPI分区,将该SPI分区的变更数据发送给显示器中的该SPI分区;
所述显示器,用于在所述上一帧图像帧显示的基础上,采用局部刷新的方式在各所述SPI分区中刷新显示变更数据。
8.根据权利要求7所述的系统,其特征在于,所述应用处理器,具体用于:获取待显示的原始图像帧,对所述原始图像帧进行格式转换,得到数据量小于所述原始图像帧数据量的目标图像帧。
9.根据权利要求7所述的系统,其特征在于,所述应用处理器,具体用于:根据各SPI分区与地址的对应关系,基于所述差异数据的附加地址信息,按照SPI分区划分所述差异数据,分别得到各所述SPI分区的变更数据。
10.根据权利要求7所述的系统,其特征在于,所述微控制单元,具体用于:微控制单元利用通用输入与输出GPIO接口以软件编程方式模拟SPI时序,向显示器中的各SPI分区发送各SPI分区各自的变更数据。
11.根据权利要求7所述的系统,其特征在于,所述应用处理器,还用于:将所述差异数据及所述附加地址信息存储在第一存储区域中,并锁定所述第一存储区域;将各所述SPI分区的变更数据存储到第二存储区域中,锁定所述第二存储区域,解锁所述第一存储区域;将所述第二存储区域的各所述SPI分区的变更数据发送给微控制单元,所述应用处理器在接收到所述微控制单元的接收完毕响应后,解锁所述第二存储区域。
12.根据权利要求11所述的系统,其特征在于,所述应用处理器中运行有算法前处理线程、重排序线程及传送线程;
所述算法前处理线程,用于获取所述目标图像帧的下一帧图像帧,将所述目标图像帧与所述下一帧图像帧进行比对,得到下一差异数据及所述下一差异数据的附加地址信息;将所述下一差异数据及所述下一差异数据的附加地址信息存储在第三存储区域中,并锁定所述第三存储区域;
所述重排序线程,用于根据所述下一差异数据及所述下一差异数据的附加地址信息,按照各SPI分区划分所述下一差异数据,分别得到各所述SPI分区的下一变更数据;各所述SPI分区的下一变更数据存储到第四存储区域中,锁定所述第四存储区域,解锁所述第三存储区域;在所述传送线程将所述第四存储区域的各所述SPI分区的下一变更数据发送给所述微控制单元后,解锁所述第四存储区域。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-6任一所述的方法步骤。
CN202111117066.5A 2021-09-23 2021-09-23 图像显示方法、系统及存储介质 Active CN113840174B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111117066.5A CN113840174B (zh) 2021-09-23 2021-09-23 图像显示方法、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111117066.5A CN113840174B (zh) 2021-09-23 2021-09-23 图像显示方法、系统及存储介质

Publications (2)

Publication Number Publication Date
CN113840174A CN113840174A (zh) 2021-12-24
CN113840174B true CN113840174B (zh) 2023-05-05

Family

ID=78969490

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111117066.5A Active CN113840174B (zh) 2021-09-23 2021-09-23 图像显示方法、系统及存储介质

Country Status (1)

Country Link
CN (1) CN113840174B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114286133A (zh) * 2021-12-28 2022-04-05 京东方科技集团股份有限公司 图像数据处理方法、装置及显示系统
CN115497432A (zh) * 2022-09-23 2022-12-20 珠海格力电器股份有限公司 数据处理方法、装置、电子设备、显示设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102047612A (zh) * 2008-03-24 2011-05-04 惠普开发有限公司 基于图像的远程访问系统
CN103391442A (zh) * 2013-07-24 2013-11-13 佳都新太科技股份有限公司 一种基于区域划分、差异比较的视频图像快速传输压缩算法
CN111477147B (zh) * 2020-04-09 2023-06-27 昆山泰芯微电子有限公司 图像处理方法、装置和电子设备

Also Published As

Publication number Publication date
CN113840174A (zh) 2021-12-24

Similar Documents

Publication Publication Date Title
CN113840174B (zh) 图像显示方法、系统及存储介质
US20080030510A1 (en) Multi-GPU rendering system
US8126993B2 (en) System, method, and computer program product for communicating sub-device state information
US20090243962A1 (en) Display system, display control apparatus, and image provision apparatus thereof
KR20170046989A (ko) 다중 디스플레이 시스템을 구성하는 디스플레이 장치 및 그 제어 방법
WO2013105716A1 (ko) 이미지 제공 시스템, 이를 위한 장치 및 이미지 제공 방법
US20190037266A1 (en) Image receiving/reproducing device, image generating/transmitting device, display system, image receiving/reproducing method, image generating/transmitting method, and computer readable medium
US9030378B2 (en) Sharing display processing system, display processing system, and display method
CN111757180B (zh) 视频显示控制设备、视频显示系统、视频显示方法及装置
CN108958831B (zh) 一种ViewGroup动态布局方法、装置及电子设备
CN113316018B (zh) 时间信息在视频画面显示的叠加方法、设备及存储介质
KR20080083235A (ko) 그래픽 가속기 및 그래픽 가속 방법
CN111367606A (zh) 一种应用程序页面的显示方法、装置、终端及介质
CN109214977B (zh) 图像处理装置及其控制方法
CN111324325A (zh) 一种显示装置、显示方法及电子设备
CN109308862B (zh) 信号控制方法、控制装置、处理装置及信号控制设备
CN115862528A (zh) 拼接显示方法、装置、led拼控器、存储介质及系统
WO2018090463A1 (zh) 输入信息分区显示的方法、装置及系统
CN111338827B (zh) 表格数据的粘贴方法、装置以及电子设备
CN106658121A (zh) 一种机顶盒显示指纹信息的方法及系统
CN113728622A (zh) 用于无线传输图像的方法及装置、存储介质及电子设备
US9201819B2 (en) Command processing apparatus, method and integrated circuit apparatus
CN105589870A (zh) 网页广告的过滤方法和系统
CN111427501A (zh) 触控实现方法及交互智能设备
CN115766677B (zh) 针对视频模式的帧率转换方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant