CN110870301B - 一种图像显示方法、装置及图像处理设备 - Google Patents

一种图像显示方法、装置及图像处理设备 Download PDF

Info

Publication number
CN110870301B
CN110870301B CN201880037421.8A CN201880037421A CN110870301B CN 110870301 B CN110870301 B CN 110870301B CN 201880037421 A CN201880037421 A CN 201880037421A CN 110870301 B CN110870301 B CN 110870301B
Authority
CN
China
Prior art keywords
display
acquisition
synchronization signal
time point
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201880037421.8A
Other languages
English (en)
Other versions
CN110870301A (zh
Inventor
尹圣宝
赵宇鹏
秦东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN110870301A publication Critical patent/CN110870301A/zh
Application granted granted Critical
Publication of CN110870301B publication Critical patent/CN110870301B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • H04N5/06Generation of synchronising signals

Abstract

一种图像处理系统中的图像显示方法、装置及图像处理设备,所述图像处理系统包括采集装置和显示装置,采集装置和显示装置相连,采集装置用于采集图像数据。其中,所述图像显示方法包括:显示装置接收采集同步信号(S201),并根据接收到的采集同步信号产生用于指示显示装置显示图像数据的显示同步信号,以便于显示装置显示图像数据(S202)。采用所述方法,可以避免采集装置采集图像与显示装置显示图像两者之间存在丢步的情况,达到精确的同步。

Description

一种图像显示方法、装置及图像处理设备
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像显示方法、装置及图像处理设备。
背景技术
无人机是利用无线电遥控设备和自备的程序控制装置操纵的不载人飞机,无人机最初被设计用于战争中,随着信息时代的发展,更多先进的信息处理与通信技术被应用在无人机中,使得无人机的种类不断增多。因此,目前的无人机可以应用在航拍、微型自拍、观察野生动物、新闻报道、电力巡检、影视拍摄等诸多领域。
其中,在航拍、微型自拍等领域应用时,要实现采集和显示图像数据,因此在无人机上需要配置有图像显示系统。一般的图像系统包括图像采集模块和图像显示模块,图像采集模块负责采集图像数据,图像显示模块负责显示图像数据。由于显示系统调度由软件控制实现,在实际应用中,很难实现图像采集模块和图像显示模块的同步,如此导致采集到的图像和显示的图像出现失步的现象。
发明内容
本发明实施例提供一种图像显示方法、装置及图像处理设备,可使得图像采集装置和图像显示装置精确同步。
一方面,本发明实施例提供了一种图像处理系统中的图像显示方法,图像处理系统包括采集装置和显示装置,采集装置和显示装置相连,采集装置用于采集图像数据,包括:
所述显示装置接收所述采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
所述显示装置基于所述采集同步信号产生显示同步信号,以显示图像数据。
另一方面,本发明实施例还提供了一种图像显示装置,所述图像显示装置配置于图像处理系统中,所述图像处理系统还包括采集装置,所述采集装置和所述图像显示装置相连,所述采集装置用于采集图像数据,所述图像显示装置包括:
接收单元,用于接收所述采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
处理单元,用于基于所述采集同步信号产生显示同步信号以显示图像数据。
再一方面,本发明实施例提供了一种图像处理设备,所述图像处理设备包括采集装置和显示装置,所述采集装置和所述显示装置相连,所述采集装置用于采集图像数据,所述显示装置包括显示处理器和显示屏,所述显示处理器包括帧同步控制器和显示控制器,所述帧同步控制器用于:
接收所述采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
基于所述采集同步信号产生显示同步信号,以显示图像数据。再一方面,本发明实施例提供一种计算机存储介质,该计算机存储介质存储有计算机程序指令,该计算机程序指令被执行时用于实现上述的图像处理系统中的图像显示方法。
本发明实施例中的图像显示方法可以应用在包括有采集装置和显示装置的图像处理系统中,在图像处理系统中采集装置与显示装置相连接,采集装置主要用于采集图像数据。显示装置在接收到采集装置发送采集同步信号的情况下,基于采集同步信号产生显示同步信号,以便于根据该显示同步信号来显示图像数据,通过以采集装置的采集同步信号来产生显示装置的显示同步信号,可以避免采集装置采集图像与显示装置显示图像两者之间存在丢步的情况,达到精确的同步。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种图像处理系统的结果图;
图2是本发明实施例提供的一种图像显示方法的流程图;
图3是本发明实施例提供的一种关于触发开始进行图像显示的时间点的确定的方法示意图;
图4是本发明实施例提供的一种关于初始时间点的确定方法示意图;
图5是本发明实施例提供的一种基于采集同步信号产生显示同步信号的方法流程图;
图6a是本发明实施例提供的一种关于查找采集同步信号的方法示意图;
图6b是本发明实施例提供的另一种关于查找采集同步信号的方法示意图;
图7是本发明实施例提供的另一种采集同步信号产生显示同步信号的方法流程图;
图8是本发明实施例提供的一种图像显示装置的结构示意图;
图9是本发明实施例提供的一种图像处理设备的结果示意图。
具体实施方式
本发明实施例针对图像处理系统提出一种图像显示方法,所述图像处理系统可以配置于无人机、航拍飞行器、相机等需要对图像进行采集并显示的图像处理设备中。在一个实施例中,图像处理系统可包括采集装置和显示装置,采集装置与显示装置相连接,采集装置用于在检测到采集同步信号时触发采集图像数据,显示装置用于显示图像数据,显示装置显示的图像数据是采集装置采集到的经过处理后的图像数据。
在一个实施例中,采集装置在图像采集时,针对每一帧图像会对应一个采集同步信号,也即每采集到一个图像数据就会伴随产生一个采集同步信号,采集同步信号与图像数据是一一对应的,此处所述的采集同步信号可以是所述采集装置产生,或者也可以是与所述采集装置相关的控制装置(例如控制芯片)产生的。采集装置可包括图像采集模块和图像信号处理模块,图像采集模块与图像信号处理模块相连接。在一个实施例中,图像采集模块可以是配置有图像传感器的图像采集设备,比如摄像头。图像采集模块采集到的图像数据为原始图像,其格式为RAW。RAW图像中记录了图像采集模块在采集图像数据时一些原始数据。例如,若图像采集模为相机,RAW格式的原始图像中记录了相机传感器的原始信息,还记录了相机拍摄图像数据时的ISO设置、快门速度、光圈值、白平衡等。图像采集模块将采集到的原始图像发送至图像信号处理模块,图像信号处理模块对原始图像进行处理,处理过程包括但不限于黑电平矫正、镜头畸变矫正、RAW域降噪处理、RAW域转RGB域以及颜色补偿等,图像信号处理模块处理后的图像数据即为显示装置将要显示的图像数据。在一个实施例中,图像信号处理模块将处理后的图像存储在图像显示设备的内存中。
在一个实施例中,显示装置在显示图像数据时,首先要产生显示同步信号,然后基于显示同步信号的指示来显示图像数据。显示装置可包括显示处理器和显示屏,显示处理器又可包括帧同步控制器和显示控制器,帧同步控制器主要用于产生显示同步信号,并将该显示同步信号发送给显示控制器;显示控制器基于该显示同步信号控制显示装置显示图像数据。在一个实施例中,显示装置基于显示同步信号的指示来显示图像数据可指:帧同步控制器产生显示同步信号后,将显示同步信号传递给显示控制器,显示控制器在接收到显示同步信号之后,从图像处理设备的内存中获取采集装置采集到的经过处理后的图像数据,再将此处的图像数据发送给显示屏,以便于显示屏将图像数据显示屏上进行显示,至此显示装置完成了显示图像数据。
参见图1,为本发明实施例提供的一种图像处理系统的结构图,如图1所示的图像处理系统中包括采集装置和显示装置,采集装置包括图像采集模块和图像处理模块,显示装置包括显示处理器和显示屏,显示处理器包括帧同步控制器和显示控制器,采集装置的图像采集模块和显示装置的显示处理器相连接。在一个实施例中,采集装置的图像采集模块和显示装置的显示处理器之间可通过硬线连接,在其他实施例中,图像采集模块和显示处理器之间也可以通过其他方式进行连接。
在一个实施例中,采集装置的图像采集模块用于采集图像数据;采集装置的图像处理模块,用于将图像采集模块采集到的图像数据进行处理,并将处理后的图像数据发送至图像处理设备的内存中进行存储。再一个实施例中,在产生图像数据时,对应会伴随产生采集同步信号,可通过采集装置将该采集同步信号发送至显示装置,以使得显示装置基于采集同步信号来显示图像数据,可保证采集装置采集图像和显示装置显示图像达到同步。
在一个实施例中,采集装置中产生的采集同步信号可以是依据采集装置的采集频率产生的,假设采集装置的采集频率为30FPS,那么采集装置就是每隔1/30秒产生一个采集同步信号。再一个实施例中,采集装置产生的采集同步信号也可以是依据采集装置的采集速度产生的,在实际应用中可以根据不同应用场景,选择合适的方式产生采集同步信号,在本发明实施例中不做具体限定。
在一个实施例中,图1所示的显示装置的显示处理器与采集装置的图像采集模块相连接,可以使得采集装置将采集同步信号传输到显示处理器,显示处理器中的帧同步控制器根据该采集同步信号产生显示同步信号,然后将产生的显示同步信号传输给显示控制器,以便于显示控制器控制显示屏显示图像数据。
请参见图2,为本发明实施例提供的一种图像显示方法,该图像显示方法可以应用在如图1所示的图像处理系统中,图像处理系统可以配置在任何需要进行图像采集和显示的图像处理设备中,比如无人机、航拍飞行器以及相机等等。下面将结合图1所示的图像显示系统的架构图,对图2所示的图像显示方法进行具体的描述。在一个实施例中,图2所述的图像显示方法应用在采集装置的采集频率和显示装置的显示帧率不相同的情况下。
在图2所示的图像显示方法中,显示装置在S201中接收采集装置发送的采集同步信号。此处的采集同步信号可以是采集装置产生的或者是与所述采集装置相关的控制装置(例如控制芯片)产生的。在一个实施例中,显示装置接收到的采集同步信号可以是通过与采集装置相连的硬线传输过来的,也可以是通过其他方式传输过来的。
显示装置接收到采集同步信号之后,在S202中基于所述采集同步信号产生显示同步信号,以显示图像数据。显示同步信号是用于指示显示装置显示图像数据的,显示装置基于采集同步信号来产生用于显示图像数据的显示同步信号可以理解为:为了保证显示装置和采集装置达到精准同步,显示装置要以采集装置的采集同步信号为基础,来确定何时产生显示同步信号以显示图像数据。
在一个实施例中,图1中的采集装置在向显示装置发送采集同步信号之前,可以先发送一个采集基准同步信号给显示装置。显示装置在接收到采集基准同步信号后,产生用于触发开始进行图像显示的显示基准同步信号。采集基准同步信号是用于指示采集装置在何时开始进行第一帧图像数据的采集,显示基准同步信号是用于指示显示装置在何时开始进行第一帧图像数据的显示。也可以理解为,采集基准同步信号是用来指示采集装置何时开始工作,显示基准同步信号是用来指示显示装置何时开始工作。
在一个实施例中,显示装置在接收到采集装置发送的采集基准同步信号之后,产生用于触发开始进行图像显示的显示基准同步信号的方式可以为:所述显示装置根据所述采集基准同步信号和图像数据处理时延,确定触发开始进行图像显示的时间点;所述显示装置在确定的所述时间点产生所述显示基准同步信号。图像数据处理时延,可以指从采集装置采集到原始图像数据到对该原始图像数据进行处理得到可用于显示的图像数据之间的时长。
在一个实施例中,图像数据处理时延,可以根据采集装置中图像处理模块对图像采集模块采集到的原始图像数据进行处理所需的时间来设定的。比如,图像处理模块对原始图像数据处理所需的时间为5秒,则可设置图像处理时延为5秒,或者也可以设置图像处理时延大于5秒比如8秒。可以理解的,将图像处理时延设置的较大一些可以保证在图像数据处理过程中,如果出现原始图像处理出错或者原始图像损坏等特殊情况时,及时重新获取原始图像数据并处理,而不影响显示装置正常显示图像数据。显示装置根据采集基准同步信号和图像处理时延来确定显示基准同步信号,有效的解决了图像数据从采集装置到显示装置中间耗时问题,进一步保证了采集装置和显示装置达到精准同步。
在一个实施例中,所述显示装置根据采集基准同步信号和图像处理时延,确定触发开始进行图像显示的时间点的方式可以为:确定采集装置产生采集基准同步信号的时间点;然后将产生采集基准同步信号的时间点向后延迟图像数据时延所指示的时间长度,将延迟后得到的时间点确定为显示装置触发开始进行图像显示的时间点。例如,如图3所示,为本发明实施例提供的一种确定触发开始进行图像显示的时间点的示意图。在图3中,假设时间点t表示采集装置产生采集基准同步信号的时间点,图像处理时延设置为5秒,则t+5时间点表示显示装置触发开始进行图像显示的时间点。
在一个实施例中,所述S202基于所述采集同步信号产生显示同步信号的实现方式可以是:根据显示装置原本产生显示同步信号的时间点和采集同步信号,在原本产生显示同步信号的时间点前后预设时间范围内查找采集同步信号,在查找到采集同步信号的时间点处产生显示同步信号,这样一来便实现了采集装置一采集到图像数据,则显示装置就能显示刚采集到的图像数据,使得采集装置和显示装置达到精准同步。
在一个实施例中,所述S202基于采集同步信号产生显示同步信号,包括:所述显示装置基于显示帧率确定显示图像数据的初始时间点;所述显示装置根据所述初始时间点和所述采集同步信号产生显示同步信号。显示帧率是指显示屏每秒显示帧数,比如30FPS指每秒显示30帧图像数据,60FPS指每秒显示60帧图像数据。初始时间点是指显示装置原本应该产生显示同步信号并显示图像的时间点。
在一个实施例中,所述基于显示帧率确定显示图像数据的初始时间点可包括:所述显示装置根据所述显示帧率确定显示图像数据的刷新时间间隔;所述显示装置基于产生显示基准同步信号的时间点和刷新时间间隔确定初始时间点。产生显示基准同步信号的时间点是指显示装置开始显示第一帧图像数据的时间点。显示帧率是指每秒显示图像数据的帧数,则各帧图像数据之间显示的时间间隔可通过1/帧率计算得到,比如显示帧率为30FPS,表示一秒显示了30帧图像数据,则每两帧图像数据显示的时间间隔也即显示图像数据的刷新时间间隔为1/30=0.033秒,也就是显示装置每隔0.033秒显示一帧图像数据。进一步的,根据每两帧图像数据显示的时间间隔,如果在已知开始显示图像数据的时间点的情况下,便可以确定任何一帧图像数据的初始时间点。比如,假设显示装置产生基准同步信号的时间点在0.02秒,显示装置的显示帧率为30FPS,则计算得到显示装置显示图像数据的刷新时间间隔为0.033秒,如此便可确定显示装置显示第二帧图像数据的时间点为0.02+0.033=0.053秒。
在一个实施例中,所述显示装置基于所述产生显示基准同步信号的时间点和所述刷新时间间隔确定初始时间点的方式可以为:首先确定当前要显示的图像数据是第几帧图像数据,根据当前是第几帧图像数据可以确定原本显示当前图像数据的时间点与产生显示基准同步信号的时间点之间的时间差,最后在产生基准同步信号的时间点基础上加上时间差,得到的时间点便是原本显示当前图像数据的时间点,也即初始时间点。
一个简单的例子,如图4所示为一种确定初始时间点的方法,假设显示装置的显示帧率为60FPS,则显示装置显示图像数据的刷新时间间隔为0.0167秒,假设当前要显示的图像数据为第3帧图像数据,则原本显示第3帧图像数据与产生基准同步信号的时间点之间的时间差为2*0.0167=0.034秒;再假设显示装置产生基准同步信号的时间点为0.1秒处,基于上述假设,则显示装置可确定显示第3帧图像数据的初始时间点为0.1+0.034=0.134秒。
参考图5,为本发明实施例提供的一种根据初始时间点和采集同步信号产生显示同步信号的方法流程图。如图5所示的根据初始时间点和采集同步信号产生显示同步信号的方法中,显示装置首先在S501中根据初始时间点查找采集同步信号。为了保证采集装置每采集到一帧数据,显示装置就可以显示一帧数据,应该确保采集装置产生采集同步信号的时间点和显示装置产生显示同步信号的时间点相同,或者两者时间点的差值在预设很小的时间范围内。在S501中,初始时间点即为显示装置原本产生显示同步信号的时间点,根据初始时间点查找采集同步信号,以便于显示根据采集同步信号对原本产生显示同步信号的时间点进行调整,与实现采集装置和显示装置的精准同步。
在一个实施例中,S501中所述显示装置根据所述初始时间点查找采集同步信号的实现方式可以为:以所述初始时间点为参考时间点,在配置的帧同步时间窗口所指示的时间范围内查找采集同步信号。帧同步时间窗口可以是显示装置预先配置的,帧同步时间窗口所指示的时间范围是指以初始时间点为参考时间点,以帧同步窗口的窗口长度为最大可查找采集同步信号的时间长度,在参考时间点之前或者之后一定的时间范围。为了避免各帧图像数据之间产生影响,帧同步时间窗口的窗口长度应该小于显示装置图像显示的刷新时间间隔。举例来说,比如显示装置的显示帧率为30FPS,则显示图像数据的刷新时间间隔为0.033秒,帧同步窗口的窗口长度应该在包括0-0.033秒之间,比如可以为0.01秒。
举例来说,参见图6a为本发明实施例提供一种查找采集同步信号的示意图。在图6a中假设显示帧率为60FPS,设置帧同步窗口的窗口长度为小于0.0167,帧同步窗口所指示的时间范围为可为a到b之间任意一个时间段,a表示帧同步窗口向前移动的可移动到的最小时间点,b点帧同步窗口向后移动的可移动到的最大时间点。如果帧同步窗口的窗口长度过长比如0.0167秒,当帧同步窗口移动到d点和c点时,则会出现如图6b所示的情况,造成各个帧之间互相影响。
在一个实施例中,在S502中如果查找到采集同步信号,将查找到采集同步信号的时间点确定为目标时间点,并且在S503中显示装置在目标时间点产生显示同步信号,S503可理解为显示装置根据采集装置的采集同步信号调整了当前帧的图像原本应该显示的时间点,从而实现采集装置和显示装置同步。
举例来说,参考图7为本发明实施例提供的一种显示装置根据采集同步信号产生显示同步信号的示意图。在图7中,假设图像处理时延为0.01秒,显示装置产生显示基准同步信号的时间点为0.01秒,假设采集装置的采集频率为30FPS,显示装置的显示帧率为60FPS,再假设帧同步窗口的窗口长度为0.02秒。根据显示帧率和产生显示基准同步信号的时间点可确定第二帧数据的初始时间点为0.01+0.0167=0.0267秒时间点处,进一步的,显示装置以初始时间点为参考时间点,在帧同步时间窗口所指示的时间范围内查找采集同步信号,假设在A点查找到采集同步信号,则将A点确定为目标时间点,显示装置在A点产生显示同步信号。
再一个实施例中,如果显示装置未查找到采集同步信号,则显示装置在初始时间点产生显示同步信号。显示装置在帧同步窗口所指示的时间范围内未查找到采集同步信号,表明采集装置采集到图像和显示装置显示图像两者的时间点相差较大,在这种情况可以认为是采集装置和显示装置很难得到同步的。显示装置可不依据采集装置他调整其产生显示同步信号的时间点。
如图2所示的本发明实施例提供的图像显示方法主要应用在采集装置的采集频率和显示装置的显示帧率不相同的情况下,也就是说在采集频率和显示帧率不相同时,为了保证采集装置采集图像和显示装置显示图像达到同步,本发明实施例显示装置以采集装置的采集同步信号作为依据,调整显示装置产生显示同步信号的时间点,以实现采集装置在哪个时间点采集到图像数据,显示装置则在哪个时间点显示图像数据。采用图2所示的图像显示方法,显示装置依据采集同步信号调整产生显示同步信号的时间点,如果显示帧率大于采集频率,则将产生显示同步信号的时间点确定为初始时间点推后的某一个时间点;如果显示帧率小于采集帧率,则将产生显示同步信号的时间点未定为初始时间点提前的某一个时间点。在一个实施例中,如果采集装置的采集频率和显示装置的显示帧率相同,则显示装置可不对产生显示同步信号的时间点做任何调整,也就是显示装置在初始时间点产生显示同步信号,以显示图像数据。
在一个实施例中,显示装置显示图像数据的实现方式可以为:当显示装置在产生显示同步信号时,从存储器中读取查找到的由所述采集装置采集的与所述采集同步信号对应的图像数据,并显示所述图像数据。
基于上述方法实施例的描述,在一个实施例中,本发明实施例还提供了一种如图8所示的图像显示装置,该图像显示装置配置于图像处理系统中,所述图像处理系统还包括采集装置,采集装置与显示装置相连接。采集装置是用于采集图像数据的,图像显示装置包括接收单元801和处理单元802:
接收单元801,用于接收采集同步信号,采集同步信号与所述采集装置采集到的图像数据相互对应;
处理单元802,用于基于采集同步信号产生显示同步信号,以显示图像数据。
在一个实施例中,采集装置还用于将采集基准同步信号发送给图像显示装置,图像显示装置的处理单元802,还用于产生用于触发开始进行图像显示的显示基准同步信号。在一个实施例中,处理单元802用于产生触发开始进行图像显示的显示基准同步信号的实施方式为:根据所述采集基准同步信号和图像数据处理时延,确定触发开始进行图像显示的时间点;在确定的所述时间点产生所述显示基准同步信号。
在一个实施例中,处理单元802用于基于采集同步信号产生显示同步信号的实施方式为:基于显示帧率确定显示图像数据的初始时间点;根据所述初始时间点和所述采集同步信号产生显示同步信号。在一个实施例中,基于显示帧率确定显示图像数据的初始时间点,包括:根据所述显示帧率确定显示图像数据的刷新时间间隔;基于所述产生显示基准同步信号的时间点和所述刷新时间间隔确定初始时间点。
在一个实施例中,根据所述初始时间点和所述采集同步信号产生显示同步信号,包括:根据所述初始时间点查找采集同步信号;如果查找到所述采集同步信号,将查找到所述采集同步信号的时间点确定为目标时间点;在所述目标时间点产生显示同步信号,以显示图像数据。在一个实施例中,处理单元802还用于,若根据初始时间点未查找到采集同步信号,则在初始时间点产生显示同步信号,以显示图像数据。
在一个实施例中,根据初始时间点查找采集同步信号,包括:以所述初始时间点为参考时间点,在配置的帧同步时间窗口所指示的时间范围内查找采集同步信号。在一个实施例中,处理单元用于基于采集同步信号产生显示同步新高,以显示图像数据的实施方式为:从存储器中读取查找到的由所述采集装置采集的与所述采集同步信号对应的图像数据,并显示所述图像数据。
在本发明实施例中,在接收单元801接收到采集装置发送的采集同步信号之后,处理单元802基于采集同步信号产生显示同步信号,以显示图像数据,可以避免采集装置采集图像与显示装置显示图像两者之间存在丢步的情况,达到精确的同步。
请参见图9,是本发明实施例提供的一种图像处理设备的结构示意性框图,如图9所示的图像处理设备可包括:采集装置901、显示装置902和存储器903,采集装置901、显示装置902和存储器903通过总线904相连接,显示装置902可包括显示处理器9021和显示屏9022,显示处理器9021包括帧同步控制器9021a和显示控制器9021b,所述存储器903用于存储程序指令和图像数据。
所述存储器903可以包括易失性存储器(volatile memory),如随机存取存储器(random-access memory,RAM);存储器903也可以包括非易失性存储器(non-volatilememory),如快闪存储器(flash memory),固态硬盘(solid-state drive,SSD)等;存储器903也可以是双倍速率同步动态随机存储器(Double Data Rate SDRAM,DDR);存储器903还可以包括上述种类的存储器的组合。
所述显示处理器9021可以是中央处理器CPU。所述显示处理器9021还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integratedcircuit,ASIC),可编程逻辑器件(programmable logic device,PLD)等。该PLD可以是现场可编程逻辑门阵列(field-programmable gate array,FPGA),通用阵列逻辑(genericarray logic,GAL)等。所述显示处理器9021也可以为上述结构的组合。
本发明实施例中,所述存储器903用于存储计算机程序,所述计算机程序包括程序指令,显示处理器9021包括帧同步控制器9021a和显示控制器9021b,帧同步控制器9021a用于执行存储器903存储的程序指令,用来实现上述实施例中的相应方法的步骤。在一个实施例中,显示控制器9021b,用于在帧同步控制器9021a产生显示同步信号时,从存储器903中读取查找到的采集同步信号对应的图像数据;显示屏9022,用于显示图像数据。
在一个实施例中,所述帧同步控制器9021a被配置用于调用所述程序指令时执行:接收所述采集同步信号;基于所述采集同步信号产生显示同步信号,以显示图像数据。
在一个实施例中,帧同步控制器9021a被配置用于调用所述程序指令时还执行:在接收到所述图像采集帧基准同步信号后,产生显示基准同步信号。
在一个实施例中,帧同步控制器9021a被配置用于调用所述程序指令执行产生显示基准同步信号的具体方式为:根据所述采集基准同步信号和图像数据处理时延,确定产生所述显示基准同步信号的时间点;在所述显示基准同步信号的时间点产生所述显示基准同步信号。
在一个实施例中,帧同步控制器9021a被配置用于调用所述程序指令执行基于所述采集同步信号产生显示同步信号的具体方式为:基于显示帧率确定显示图像数据的初始时间点;根据所述初始时间点和所述采集同步信号产生显示同步信号。在一个实施例中,基于显示帧率确定显示图像数据的初始时间点的具体方式为:根据所述显示帧率确定显示图像数据的刷新时间间隔;基于所述产生图像显示帧基准同步信号的时间点和所述刷新时间间隔确定初始时间点。
在一个实施例中,根据所述初始时间点和所述采集同步信号产生显示同步信号的具体方式为:根据所述初始时间点查找采集同步信号;如果查找到所述采集同步信号,将查找到所述采集同步信号的时间点确定为目标时间点;在所述目标时间点产生显示同步信号,以显示图像数据。
在一个实施例中,根据初始时间点查找采集同步信号的具体方式为:以所述初始时间点为参考时间点,在帧同步时间窗口所指示的时间范围内查找采集同步信号。在一个实施例中,帧同步控制器9021a被配置用于调用所述程序指令时还执行:如果没有查找到采集同步信号,在初始时间点产生显示同步信号。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明部分实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (17)

1.一种图像处理系统中的图像显示方法,其特征在于,所述图像处理系统包括采集装置和显示装置,所述采集装置和所述显示装置相连,所述采集装置用于采集图像数据,所述方法包括:
所述显示装置接收采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
所述显示装置基于所述采集同步信号产生显示同步信号,以显示图像数据;
所述基于所述采集同步信号产生显示同步信号,包括:
所述显示装置基于显示帧率确定显示图像数据的初始时间点,所述初始时间点是指所述显示装置原本应该产生显示同步信号并显示图像的时间点;
所述显示装置根据所述初始时间点查找采集同步信号;
如果查找到所述采集同步信号,所述显示装置将查找到所述采集同步信号的时间点确定为目标时间点;
所述显示装置在所述目标时间点产生显示同步信号,以显示图像数据。
2.如权利要求1所述的方法,其特征在于,所述采集装置将用于触发开始进行图像采集的采集基准同步信号发送给所述显示装置,所述方法还包括:
所述显示装置在接收到所述采集基准同步信号后,产生用于触发开始进行图像显示的显示基准同步信号。
3.如权利要求2所述的方法,其特征在于,所述显示装置产生用于触发开始进行图像显示的显示基准同步信号,包括:
所述显示装置根据所述采集基准同步信号和图像数据处理时延,确定触发开始进行图像显示的时间点;
所述显示装置在确定的所述时间点产生所述显示基准同步信号。
4.如权利要求2所述的方法,其特征在于,所述显示装置基于显示帧率确定显示图像数据的初始时间点,包括:
所述显示装置根据所述显示帧率确定显示图像数据的刷新时间间隔;
所述显示装置基于所述产生显示基准同步信号的时间点和所述刷新时间间隔确定初始时间点。
5.如权利要求1所述的方法,其特征在于,所述显示装置根据所述初始时间点查找采集同步信号,包括:
所述显示装置以所述初始时间点为参考时间点,在配置的帧同步时间窗口所指示的时间范围内查找采集同步信号。
6.如权利要求1所述的方法,其特征在于,在确定所述采集装置的采集频率和所述显示装置的显示帧率不相同时,所述显示装置执行所述基于显示帧率确定显示图像数据的初始时间点的步骤。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
如果没有查找到所述采集同步信号,所述显示装置在所述初始时间点产生显示同步信号。
8.如权利要求1所述的方法,其特征在于,所述显示装置基于所述采集同步信号产生显示同步信号,以显示图像数据,包括:
所述显示装置在产生所述显示同步信号时,从存储器中读取查找到的由所述采集装置采集的与所述采集同步信号对应的图像数据,并显示所述图像数据。
9.一种图像显示装置,其特征在于,所述图像显示装置配置于图像处理系统中,所述图像处理系统还包括采集装置,所述采集装置和所述图像显示装置相连,所述采集装置用于采集图像数据,所述图像显示装置包括:
接收单元,用于接收采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
处理单元,用于基于所述采集同步信号产生显示同步信号,以显示图像数据;
所述处理单元基于所述采集同步信号产生显示同步信号时,具体用于基于显示帧率确定显示图像数据的初始时间点,所述初始时间点是指所述显示装置原本应该产生显示同步信号并显示图像的时间点;根据所述初始时间点查找采集同步信号;如果查找到所述采集同步信号,将查找到所述采集同步信号的时间点确定为目标时间点;在所述目标时间点产生显示同步信号,以显示图像数据。
10.一种图像处理设备,其特征在于,所述图像处理设备包括采集装置和显示装置,所述采集装置和所述显示装置相连,所述采集装置用于采集图像数据,所述显示装置包括显示处理器和显示屏,所述显示处理器包括帧同步控制器和显示控制器,所述帧同步控制器用于:
接收采集同步信号,所述采集同步信号与所述采集装置采集到的图像数据相互对应;
基于所述采集同步信号产生显示同步信号,以显示图像数据;
所述帧同步控制器基于所述采集同步信号产生显示同步信号时,具体用于:
基于显示帧率确定显示图像数据的初始时间点,所述初始时间点是指所述显示装置原本应该产生显示同步信号并显示图像的时间点;
根据所述初始时间点查找采集同步信号;
如果查找到所述采集同步信号,将查找到所述采集同步信号的时间点确定为目标时间点;
在所述目标时间点产生显示同步信号,以显示图像数据。
11.如权利要求10所述的图像处理设备,其特征在于,所述采集装置将用于触发开始进行图像采集的采集基准同步信号发送给所述显示装置,所述帧同步控制器还用于:
在接收到所述采集基准同步信号后,产生用于触发开始进行图像显示的显示基准同步信号。
12.如权利要求11所述的图像处理设备,其特征在于,所述帧同步控制器用于产生用于触发开始进行图像显示的显示基准同步信号的具体方式为:
根据所述采集基准同步信号和图像数据处理时延,确定产生所述显示基准同步信号的时间点;
在所述显示基准同步信号的时间点产生所述显示基准同步信号。
13.如权利要求11所述的图像处理设备,其特征在于,所述基于显示帧率确定显示图像数据的初始时间点的具体方式为:
根据所述显示帧率确定显示图像数据的刷新时间间隔;
基于所述产生显示基准同步信号的时间点和所述刷新时间间隔确定初始时间点。
14.如权利要求10所述的图像处理设备,其特征在于,所述根据所述初始时间点查找采集同步信号的具体方式为:
以所述初始时间点为参考时间点,在帧同步时间窗口所指示的时间范围内查找采集同步信号。
15.如权利要求10所述的图像处理设备,其特征在于,在确定所述采集装置的采集频率和所述显示装置的显示帧率不相同时,所述帧同步控制器执行所述基于显示帧率确定显示图像数据的初始时间点的步骤。
16.如权利要求10所述的图像处理设备,其特征在于,帧同步控制器还用于:
如果没有查找到所述采集同步信号,在所述初始时间点产生显示同步信号。
17.如权利要求10所述的图像处理设备,其特征在,所述显示控制器,用于在所述帧同步控制器产生所述显示同步信号时,从存储器中读取查找到的所述采集同步信号对应的图像数据;所述显示屏,用于显示所述图像数据。
CN201880037421.8A 2018-08-30 2018-08-30 一种图像显示方法、装置及图像处理设备 Expired - Fee Related CN110870301B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/103294 WO2020042090A1 (zh) 2018-08-30 2018-08-30 一种图像显示方法、装置及图像处理设备

Publications (2)

Publication Number Publication Date
CN110870301A CN110870301A (zh) 2020-03-06
CN110870301B true CN110870301B (zh) 2021-04-02

Family

ID=69642656

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880037421.8A Expired - Fee Related CN110870301B (zh) 2018-08-30 2018-08-30 一种图像显示方法、装置及图像处理设备

Country Status (2)

Country Link
CN (1) CN110870301B (zh)
WO (1) WO2020042090A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113519153B (zh) * 2020-02-12 2023-03-21 深圳元戎启行科技有限公司 图像采集方法、装置、控制装置、计算机设备、可读存储介质、图像采集设备和远程驾驶系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102956188A (zh) * 2012-12-11 2013-03-06 四川虹欧显示器件有限公司 一种驱动等离子显示设备的方法和装置
CN103402060A (zh) * 2013-08-14 2013-11-20 中国科学院长春光学精密机械与物理研究所 Dmd灰度景象播放器与图像采集系统的同步方法
CN105450382A (zh) * 2014-05-26 2016-03-30 华为技术有限公司 用于媒体播放的时钟同步方法及设备
CN106210443A (zh) * 2016-08-31 2016-12-07 成都炫境科技有限公司 网络控制显示内容同步的方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102060234B (zh) * 2010-10-26 2012-12-26 常州超媒体与感知技术研究所有限公司 轮胎吊车行进轨迹视频纠偏装置及方法
KR20150122395A (ko) * 2014-04-23 2015-11-02 삼성전기주식회사 백라이트 장치 및 이의 제어 방법
SG11201706262WA (en) * 2015-03-26 2017-10-30 Mitsubishi Electric Corp Video information reproduction system and video information reproduction device
CN104869360B (zh) * 2015-05-19 2019-01-18 华为技术有限公司 视频采集和显示同步方法和装置
CN106683034A (zh) * 2016-12-29 2017-05-17 上海拆名晃信息科技有限公司 一种用于虚拟现实的异步时间卷曲计算方法
CN107613357B (zh) * 2017-09-13 2020-05-19 广州酷狗计算机科技有限公司 声画同步优化方法、装置及可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102956188A (zh) * 2012-12-11 2013-03-06 四川虹欧显示器件有限公司 一种驱动等离子显示设备的方法和装置
CN103402060A (zh) * 2013-08-14 2013-11-20 中国科学院长春光学精密机械与物理研究所 Dmd灰度景象播放器与图像采集系统的同步方法
CN105450382A (zh) * 2014-05-26 2016-03-30 华为技术有限公司 用于媒体播放的时钟同步方法及设备
CN106210443A (zh) * 2016-08-31 2016-12-07 成都炫境科技有限公司 网络控制显示内容同步的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于FPGA和USB2.0视频图像采集及处理平台设计;吕炎军;《中国优秀硕士学位论文全文数据库 信息科技辑》;20071015(第4期);I140-299 *

Also Published As

Publication number Publication date
CN110870301A (zh) 2020-03-06
WO2020042090A1 (zh) 2020-03-05

Similar Documents

Publication Publication Date Title
US9398206B2 (en) Focus adjustment apparatus, focus adjustment method and program, and imaging apparatus including focus adjustment apparatus
EP2963909A1 (en) Electronic apparatus
US9684841B2 (en) Method of transmitting moving image and surveillance system using the method
KR102229152B1 (ko) 이미지 촬영 장치
US20150078725A1 (en) Image capturing apparatus, image capturing system, and control method for the image capturing apparatus
US10609265B2 (en) Methods and apparatus for synchronizing camera flash and sensor blanking
US9838632B2 (en) Image processing apparatus capable of movie recording, image pickup apparatus, control method therefor, and storage medium
US20150237253A1 (en) Solid-state image sensor, electronic device, and auto focusing method
JP5843525B2 (ja) 撮像装置及びその制御方法
US8531537B2 (en) Imaging apparatus for processing still picture signals and live view signals output from an image sensor
US20150264279A1 (en) Image pickup apparatus and method of controlling the same, and storage medium
CN110870301B (zh) 一种图像显示方法、装置及图像处理设备
US8692926B2 (en) Focus adjustment based on indicator of randomness of pixel values
CN107181894B (zh) 拍摄装置
US9661237B2 (en) Image capturing apparatus, control method thereof, and storage medium
US20120075495A1 (en) Electronic camera
US11356603B2 (en) Image capturing apparatus and control method therefor
US11102423B2 (en) Image pickup apparatus that performs flicker detection, control method for image pickup apparatus, and storage medium
US10178342B2 (en) Imaging system, imaging apparatus, and control method for controlling the same
JP5478761B2 (ja) 撮像装置
US10212313B2 (en) Data processing device
US20150085172A1 (en) Image capturing apparatus and control method thereof
JP2019062369A (ja) 撮像装置及びその制御方法、電子機器のその制御方法、プログラム
JP2012068394A (ja) 電子カメラ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210402

CF01 Termination of patent right due to non-payment of annual fee