CN109791755B - 图像处理装置、显示装置及其控制方法 - Google Patents

图像处理装置、显示装置及其控制方法 Download PDF

Info

Publication number
CN109791755B
CN109791755B CN201780058450.8A CN201780058450A CN109791755B CN 109791755 B CN109791755 B CN 109791755B CN 201780058450 A CN201780058450 A CN 201780058450A CN 109791755 B CN109791755 B CN 109791755B
Authority
CN
China
Prior art keywords
image processing
image data
image
buffer
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780058450.8A
Other languages
English (en)
Other versions
CN109791755A (zh
Inventor
崔容硕
金度亨
宋准镐
李相祚
李垣昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109791755A publication Critical patent/CN109791755A/zh
Application granted granted Critical
Publication of CN109791755B publication Critical patent/CN109791755B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005Adapting incoming signals to the display format of the display terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003Display of colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/391Resolution modifying circuits, e.g. variable screen formats
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/04Maintaining the quality of display appearance
    • G09G2320/043Preventing or counteracting the effects of ageing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/066Adjustment of display parameters for control of contrast
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/02Graphics controller able to handle multiple formats, e.g. input or output formats
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/18Use of a frame buffer in a display terminal, inclusive of the display panel

Abstract

本公开的一个方面是提供一种能够防止图像数据的图像质量快速降低的图像处理装置、显示装置和控制显示装置的方法。根据本公开的示例方面,显示装置包括:多个图像处理模块,每个图像处理模块被配置为执行图像处理过程;控制器,被配置为基于多个图像处理模块的状态信息,输出由多个图像处理模块中的任何一个图像处理模块处理的图像数据;以及显示器,被配置为显示输出的图像数据。

Description

图像处理装置、显示装置及其控制方法
技术领域
本公开一般涉及执行图像处理过程的图像处理装置、显示装置和控制显示装置的方法。
背景技术
显示装置是指能够通过具有显示面板以各种格式可视地显示图像数据的装置。
显示装置可以处理从各种外部图像源发送或存储在其中的图像数据,然后在显示面板上显示图像数据。例如,显示装置对从外部接收的广播信号执行各种图像处理过程,例如解码和缩放,以便在显示装置上显示用户期望的广播频道中的图像。
近来,显示装置可以通过改进从各种外部图像源发送或存储在其中的图像数据的图像质量来向用户提供具有沉浸感(immersion)的图像。
发明内容
技术问题
本公开的示例方面要提供能够防止和/或减少图像数据的图像质量的快速降低的图像处理装置、显示装置和控制显示装置的方法。
技术方案
根据本公开的示例方面,一种显示装置,包括:多个图像处理模块,包括被配置为执行图像处理过程的图像处理电路;控制器,被配置为基于所述多个图像处理模块的状态信息输出由所述多个图像处理模块中的任何一个图像处理模块处理的图像数据;以及显示器,被配置为显示输出的图像数据。
所述多个图像处理模块分别连接到存储从所述多个图像处理模块输出的图像数据的缓冲器,并且所述控制器可以基于所述多个图像处理模块的状态信息,选择连接到所述多个图像处理模块的缓冲器中的任何一个缓冲器,并输出存储在所选择的缓冲器中的图像数据。
所述控制器可以从所述多个图像处理模块接收状态信息,并且通过比较接收的状态信息来确定图像处理状态是否处于正常状态,其中正常状态是正常输出关于需要被输出的区域的图像数据的状态。
所述多个图像处理模块可以包括:第一图像处理模块,包括第一图像处理电路,被配置为对图像数据执行第一图像处理过程;以及第二图像处理模块,包括第二图像处理电路,被配置为对从第一图像处理模块输出的图像数据执行第二图像处理过程,并且当确定图像处理状态不是正常状态时,所述控制器被配置为从连接到所述多个图像处理模块的缓冲器中的、存储从第一图像处理模块输出的图像数据的缓冲器接收关于需要被输出的区域的图像数据,并输出图像数据。
所述控制器可以使用所述多个图像处理模块的状态信息来估计工作负荷,并且基于估计的工作负荷来设置图像处理过程的复杂度。
所述显示装置还包括:缓冲器,连接到所述多个图像处理模块,并被配置为接收由所述多个图像处理模块处理的图像数据,并存储图像数据,其中,当从所述多个图像处理模块中的至少一个输入与预先存储在缓冲器中的图像数据对应于相同区域的图像数据时,控制器用所述对应于相同区域的图像数据替换预先存储在缓冲器中的图像数据。
所述多个图像处理模块可以执行不同的图像处理过程。
根据本公开的示例方面,一种显示装置的控制方法,包括:基于多个图像处理模块的状态信息,输出由所述多个图像处理模块中的任何一个图像处理模块处理的图像数据;以及显示输出的图像数据。
所述多个图像处理模块可以分别连接到存储从所述多个图像处理模块输出的图像数据的缓冲器,并且输出还可以包括:基于所述多个图像处理模块的状态信息,选择连接到所述多个图像处理模块的缓冲器中的任何一个缓冲器,并输出存储在所选择的缓冲器中的图像数据。
所述输出还可包括:通过从所述多个图像处理模块接收状态信息,并且通过比较接收的状态信息来确定图像处理状态是否处于正常状态,其中正常状态是正常输出关于需要被输出的区域的图像数据的状态。
所述多个图像处理模块可包括:第一图像处理模块,包括第一图像处理电路,被配置为对图像数据执行第一图像处理过程;以及第二图像处理模块,包括第二图像处理电路,被配置为对从第一图像处理模块输出的图像数据执行第二图像处理过程,并且所述输出还包括:当确定图像处理状态不是正常状态时,从连接到所述多个图像处理模块的缓冲器中的、存储从第一图像处理模块输出的图像数据的缓冲器接收关于需要被输出的区域的图像数据,并输出图像数据。
所述多个图像处理模块可以连接到缓冲器,所述缓冲器接收由所述多个图像处理模块处理的图像数据,并存储图像数据,并且所述输出还包括:当从所述多个图像处理模块中的至少一个输入与预先存储在缓冲器中的图像数据对应于相同区域的图像数据时,基于图像处理水平确定是否用所述对应于相同区域的图像数据替换预先存储在缓冲器中的图像数据。
有益效果
根据提出的图像处理装置、显示装置和控制显示装置的方法,尽管不满足实时处理条件,但是可以防止和/或减少图像数据的图像质量的快速降低。
根据所提出的图像处理装置、显示装置和控制显示装置的方法,可以使用通过收集状态信息产生的历史信息来设置图像处理过程,因此可能会有效地执行图像处理过程,同时防止和/或减少计算的过载。
附图说明
图1是示出根据本公开的示例实施例的各种示例显示装置的图;
图2是示出通过图像处理过程改进图像数据的图像质量的示例的图;
图3是示出根据示例实施例的示例图像处理装置的框图;
图4是示出根据示例实施例的基于操作流程的示例图像处理装置的框图;
图5是示出根据示例实施例的通过以行的顺序接收图像数据来执行图像处理的图像处理装置的示例操作的图;
图6是示出根据示例实施例在不满足实时条件时产生的示例问题的图;
图7A、7B和7C是示出根据示例实施例的图像处理装置的示例图像质量改进的曲线图;
图8和图9是示出根据各种示例实施例的其中提供了附加缓冲器的示例图像处理装置的框图;
图10是示出根据示例实施例的其中提供了辅助处理模块的示例图像处理装置的框图;
图11A和11B是示出根据各种示例实施例的其中提供了单个缓冲器的示例图像处理装置的框图;
图12是示出根据本公开示例实施例的显示装置的示例外观的图;
图13A和13B是示出根据各种示例实施例的示例显示装置的框图;
图14是示出根据示例实施例的操作图像处理装置的示例方法的流程图;以及
图15是示出根据本公开示例实施例的操作显示装置的示例方法的流程图。
具体实施方式
现在将更详细地参考本公开的各种示例实施例,其示例在附图中示出。
图1是示出根据本公开的示例实施例的各种示例显示装置的图,并且图2是示出通过图像处理过程改进图像数据的图像质量的示例的图。在下文中,为了避免重复描述,对它们的描述将一起进行。
例如,显示装置可以指能够通过具有显示面板以各种格式可视地显示图像数据的装置。例如,但不限于,显示装置可以包括能够在显示面板上显示各种图像数据的各种装置,例如,电视(TV)A、监视器B和智能电话C等。
显示装置可以包括各种类型的装置,包括便携式多媒体设备,例如但不限于,个人数字助理(PDA)和便携式多媒体播放器(PMP)、以及便携式通信设备、眼镜类型和手表类型的可穿戴设备等。另外,显示装置可以包括其中嵌入处理器以进行图像处理并且其中提供了显示面板以可视地显示图像数据的所有类型的设备,因此对实现形式没有限制。
由于图像处理装置通常嵌入在显示装置中,因此显示装置可以执行图像处理过程。参考图2,显示装置可以通过图像处理装置执行图像处理过程(M),以基于第一图像数据(I1)产生具有改进的图像质量的第二图像数据(I2)。第一图像数据(I1)可以表示在不执行图像处理过程(M)的状态下的图像数据,并且第二图像数据(I2)可以表示在执行图像处理过程(M)的状态下的图像数据。
当比较第一图像数据(I1)和第二图像数据(I2)时,可以确认第二图像数据(I2)的图像质量相对于第一图像数据(I1)得到改进。下文描述的图像处理过程包括但不限于转换格式以在显示面板上显示图像、以及图像数据的预处理(例如,解码)和一系列图像质量改进处理,例如,降噪、对比度增强、细节增强和颜色处理。
例如,图像处理过程(M)可以包括细节增强(E1)、对比度增强(E2)和颜色处理(E3)中的至少一个。图像处理过程(M)不限于此,因此图像处理过程(M)可以包括当在显示面板上显示图像数据时执行的一系列过程。
至于图像处理过程,可能需要实时处理条件。图像数据可以实时显示在显示面板上。为了实时显示图像数据,可以实时执行图像处理过程。
例如,存在为图像处理过程先前指定的时间,因此可能需要在指定的时间内完成图像处理过程。然而,当执行图像处理过程时,可能难以满足实时处理条件,因为完成图像处理过程所需的时间段由于各种因素而变化。
当由于不满足实时处理条件而产生错过截止期(deadline miss)时,例如,为图像处理过程指定的时间期满,可能在显示面板上显示的图像上显著地产生视觉伪像。
根据示例实施例,为了减轻上述困难,尽管不允许实时处理,但是图像处理装置可以确保图像质量而没有显著视觉伪像。在下文中,将更详细地描述示例图像处理装置的框图。
图3是示出根据示例实施例的示例图像处理装置的框图。图4是示出根据示例实施例的基于操作流程的示例图像处理装置的框图。图5是示出图像处理装置通过以行的顺序接收图像数据来执行图像处理的示例操作的图,并且图6是示出根据示例实施例的当不满足实时条件时产生的示例问题的图。图7A、7B和7C是示出根据示例实施例的图像处理装置的示例图像质量改进的曲线图,并且图8和9是示出根据各种示例实施例的其中提供了附加缓冲器的示例图像处理装置的框图。图10是示出根据示例实施例的其中提供了辅助处理模块的示例图像处理装置的框图,并且图11A和11B是示出根据各种示例实施例的其中提供了单个缓冲器的示例图像处理装置的框图。在下文中,为了避免重复描述,将一起对它们进行描述。
参考图3,图像处理装置100可包括数据输入(例如,包括输入电路)101、缓冲器102、图像处理模块(例如,包括图像处理电路)107、确定器(例如,包括处理电路)111和数据输出部分(例如,包括数据输出电路)112。数据输入101、缓冲器102、图像处理模块107、确定器111和数据输出部分112中的至少一个可以集成在图像处理装置100中提供的片上系统(SOC)中。然而,图像处理装置100中提供的片上系统(SOC)的数量不限于一个,因此不限于将它们集成在单个片上系统(SOC)中。
在以下描述中,诸如“单元”、“部分”和“模块”的术语可以指例如用于处理至少一个功能或操作的单元。例如,“单元”、“部分”和“模块”可以表示软件、硬件或其任何组合,例如但不限于专用处理器、CPU、现场可编程门阵列(FPGA)、专用集成电路(ASIC)等。然而,术语“单元”、“部分”和“模块”不限于软件或硬件。此外,“单元”、“部分”和“模块”可以存储在可访问的存储模块中,或者“单元”、“部分”和“模块”可以是由一个或多个处理器执行的组件。
数据输入101可以包括各种电路并接收图像数据的输入。例如,数据输入101可以在预定定时经由输入端接收图像数据的输入。
数据输入101可以转换通过输入端接收的图像数据的格式。根据实施例,数据输入101可以执行解码过程以允许图像处理模块107执行图像处理。
输入端可以连接到显示装置1中的各种外部图像源或存储器,使得数据输入118可以从外部图像源接收图像数据或者本身存储在显示装置1中的存储器中的图像数据。外部图像源可以包括外部存储器和外部服务器。外部图像源可以直接连接到图像处理器(例如,包括处理电路)150a、内容接收器(例如,包括内容接收电路)120、通信器(例如,包括通信电路)140,或者连接到包括在稍后描述的(参考图13A)显示装置1中的控制器(例如,包括处理电路)170。
数据输入101可以在第一缓冲器103中存储其格式被转换的图像数据。第一图像处理模块108可以通过接收存储在第一缓冲器103中的图像数据来执行图像处理过程。存储在第一缓冲器103中的图像数据可以顺序输入到第一图像处理模块108并经过图像处理过程。因此,可以顺序输出已经过图像处理过程的图像数据,然后将其存储在第二缓冲器104中。
关于数据输入101,第一缓冲器103可以被操作为存储从数据输入101输出的图像数据的输出缓冲器,并且关于第一图像处理模块108,第一缓冲器103可以被操作为存储输入到第一图像处理模块108的图像数据的输入缓冲器。稍后将描述缓冲器102和图像处理模块107的详细说明。
数据输入101可以根据预定顺序接收图像数据的输入。例如,数据输入101可以按行的顺序接收图像数据的输入。
可以在形成显示面板的多个像素上显示图像数据,并且可以通过水平行或垂直行来划分多个像素。例如,如图2所示的第一图像数据(I1)可以通过如图5所示的15行形成,并且每行中的图像数据可以顺序输入到数据输入101。另外,数据输入101可以按照图像数据被输入的顺序输出图像数据,然后将图像数据存储在第一缓冲器103中。第一图像处理模块108可以对存储在第一缓冲器103中的图像数据顺序地执行图像处理过程。
例如,数据输入101可以顺序地接收从第一行到第十五行的图像数据。数据输入101可以对第一行的图像数据到第十五行的图像数据执行诸如转换格式的系列处理。数据输入101可以输出第一行的图像数据并存储在第一缓冲器103中,并且最后存储第十五行的图像数据。
可以在图像处理装置100中提供缓冲器102。参考图3,缓冲器102可以包括第一缓冲器103、第二缓冲器104、第三缓冲器105和第n缓冲器106(N≥4)中的至少一个。关于图像处理模块107和数据输出部分112中的至少一个,第一缓冲器103、第二缓冲器104、第三缓冲器105和第n缓冲器106(N≥4)可以在操作为输入缓冲器的同时操作为输出缓冲器。稍后将描述其详细说明。
在下文中为了便于描述,将描述包括第一缓冲器103、第二缓冲器104和第三缓冲器105的缓冲器102作为示例。另外,如果不需要区分第一缓冲器103、第二缓冲器104和第三缓冲器105,则第一缓冲器103、第二缓冲器104和第三缓冲器105将被称为缓冲器102。
在缓冲器102中,可以提供存储器以存储各种数据。例如,由于在缓冲器102中提供存储器,因此可以存储经图像处理处理的图像数据。此时,可以分别预先确定第一缓冲器103、第二缓冲器104和第三缓冲器105的存储容量。例如,第一缓冲器103、第二缓冲器104和第三缓冲器105的存储容量可以被设置为彼此相同或不同。可以将存储器地址预先分配给第一缓冲器103、第二缓冲器104和第三缓冲器105的存储器。
与第一缓冲器103、第二缓冲器104和第三缓冲器105有关的信息可以记录在图像处理装置100的寄存器上。因此,数据输出部分112可以基于记录在寄存器上的信息选择性地读取图像数据。
替代地,与第一缓冲器103、第二缓冲器104和第三缓冲器105有关的信息可以预先存储在数据输出部分112中,因此数据输出部分112可以基于预先存储的信息选择性地读取图像数据。根据实施例,数据输出部分112可以使用存储器地址选择期望的图像数据,并将所选择的图像数据输出到输出端。稍后将描述数据输出部分112的详细说明。
缓冲器102可以实现为循环缓冲器。因此,当缓冲器102的存储容量已满时,可以删除所存储的图像数据中的最旧的图像数据,并且可以存储新输入的图像数据。
例如,当在第一缓冲器103中可以存储三行中的图像数据时,第一行的图像数据可以存储在存储器地址‘0x000000’中,第二行的图像数据可以存储在存储器地址‘0x000010中’,并且第三行的图像数据可以存储在存储器地址‘0x01000’中。此时,当从数据输入101输出第四行的图像数据时,可以删除存储器地址“0x000000”中的第一行的图像数据,并且可以将第四行的图像数据存储在存储器地址‘0x000000’中。
如上所述,关于数据输入101,第一缓冲器103可以操作为输出缓冲器,并且关于第一图像处理模块108,第一缓冲器103可以操作为输入缓冲器。
关于第一图像处理模块108,第二缓冲器104可以操作为输出缓冲器,从第一图像处理模块108接收经过第一图像处理过程的图像数据。关于第二图像处理模块109,第二缓冲器104可以操作为输入缓冲器,存储输入到第二图像处理模块109的图像数据。
关于第二图像处理模块109,第三缓冲器105可以操作为输出缓冲器,接收经过第二图像处理过程并从第二图像处理模块109输出的图像数据,并存储图像数据。关于数据输出部分112,第三缓冲器105可以操作为输入缓冲器,存储由数据输出部分112输出到输出端的数据。
图像处理模块107可以提供在图像处理装置100中。图像处理模块107可以包括第一图像处理模块108、第二图像处理模块109和第M图像处理模块110(M≥3)中的至少一个,但是图像处理模块的数量不限于此。以下为了便于描述,将描述由第一图像处理模块108和第二图像处理模块109组成的图像处理模块107作为示例。
在下文中,由第一图像处理模块108执行的图像处理过程可以被称为第一图像处理过程,并且经过第一图像处理的图像数据可以被称为“第一图像数据”。由第二图像处理模块109执行的图像处理过程可以被称为第二图像处理过程,并且经过第二图像处理的图像数据可以被称为“第二图像数据”。另外,如果不需要区分第一图像处理过程和第二图像处理过程,则将第一图像处理过程和第二图像处理过程称为图像处理过程。
第一图像处理模块108可以执行第一图像处理过程以输出第一图像数据,并且第二图像处理模块109可以对第一图像数据执行第二图像处理过程以输出第二图像数据。因此,可以逐渐改进图像质量。也就是说,随着图像数据顺序地通过多个图像处理过程,可以逐渐改进图像数据的图像质量。
然而,由于图像数据实时显示在显示面板上,因此可能需要可以在短时间内执行图像处理过程,并且数据输出部分112可以根据预定定时输出图像数据。
根据传统方法,虽然当图像处理装置应输出第x(x≥1)行的图像数据时没有从图像处理模块输出第X行的图像数据,但是图像处理装置连续输出存储在最终输出缓冲器(例如,第三缓冲器105)中的图像数据。因此,与显示面板上的相同区域相关的图像可能重复显示,因此可能出现显著的视觉伪像,如图6所示。
另一方面,虽然当图像处理装置应输出第x(x≥1)行的图像数据时没有从第二图像处理模块109输出第X行的图像数据,但是根据实施例的数据输出部分112可以输出存储在存储了经第一图像处理处理的数据的缓冲器(例如,第二缓冲器104)中的第X行的图像数据,从而防止和/或减少视觉伪像。稍后将描述其详细说明。
图像处理模块107可以执行图像处理过程,该图像处理过程转换图像数据的格式以适合输出端所需的格式。另外,图像处理模块107可以执行图像处理过程以改进图像质量。
图像处理模块107可以对与整个区域相关的图像数据执行图像处理过程。此外,图像处理模块107可以执行用于改进与特定区域相关的图像质量的图像处理过程。此时,特定区域可以对应于改进图像质量所需的感兴趣区域,并且控制器170可以仅执行关于除特定区域之外的区域中的图像数据的格式转换。
当完成第一图像处理模块108的第一图像处理过程时,第二图像处理模块109可以接收存储在第二缓冲器104中的第一图像数据,然后执行第二图像处理过程。随着需要改进图像质量的感兴趣区域的大小增加,计算要求可能提高,因此延迟的风险可能提高。因此,存在违反实时处理条件的高风险。因此,当需要显示具有高图像质量的图像时,可能存在违反实时处理条件的高风险,并且可能存在产生视觉伪像的高风险。在下文中,将在后面描述被配置为确定是否满足实时条件的确定器111的详细说明。
根据实施例,图像处理装置100可以提供有确定器111。
确定器111可以包括各种电路,并且通过接收图像处理装置100中的组件的状态信息来确定图像处理的状态是否正常。状态信息可以被配置为检测图像处理装置100中的组件的状态,并且包括缓冲器102的存储信息、与输入到图像处理模块107的图像数据有关的信息、与从图像处理模块107输出的图像数据有关的信息、图像处理结果、与图像处理模块107的处理状态有关的信息、以及与处理速度有关的信息。
例如,数据输入101、第一图像处理模块108和第二图像处理模块109均可以将状态信息记录在图像处理装置100的寄存器中。确定器111可以接收状态信息并通过比较每个组件之间的状态信息来确定图像处理的状态。
例如,当确定器111连接到图像处理模块107时,确定器111可以接收图像处理模块107的状态信息,然后通过比较状态信息来确定图像处理的状态是否正常。换句话说,确定器111可以确定图像处理结果是否满足实时处理条件。
确定器111可以继续更新状态信息。确定器111可以将比较图像处理结果与预定时间段进行比较,以便确定图像处理的状态是否正常,例如,图像处理的状态是否满足实时处理条件。
例如,基于状态信息,确定器111可以检测第一图像处理模块108和第二图像处理模块109分别关于哪行的图像数据执行图像处理过程、哪行的图像数据在输入队列中,并且检测直到哪行的图像数据被输出。另外,确定器111可以将检测结果与需要经由数据输出部分112输出的图像数据被置于的行的号进行比较,以确定图像处理的状态是否满足实时条件。
根据实施例,当在第y行的图像数据存储在第三缓冲器105中的状态下需要输出第y行的图像数据时,确定器111可以确定图像处理的状态满足实时条件。也就是说,图像处理的状态处于正常状态。
根据另一实施例,当直到第z-1行的图像数据存储在第三缓冲器105中的状态下需要输出第z行的图像数据时,确定器111可以确定图像处理的状态不处于正常状态,因为图像处理的状态不满足条件。此时,确定器111可以确定第z行的图像数据是否存储在第一缓冲器103和第二缓冲器104中。确定器111可以将确定结果发送到数据输出部分112。基于确定结果,数据输出部分112可以从第一缓冲器103和第二缓冲器104中的任何一个接收第z行的图像数据,然后输出该图像数据。以下将描述数据输出部分112的说明。
数据输出部分112可以基于确定结果选择存储在多个缓冲器中的至少一个缓冲器中的图像数据,接收所选择的图像数据并输出所选择的图像数据。例如,数据输出部分112可以连接到第一缓冲器103、第二缓冲器104和第三缓冲器105,如图3和4所示。因此,数据输出部分112可以读取存储在第一缓冲器103、第二缓冲器104和第三缓冲器105中的至少一个中的图像数据,并将该图像数据输出到输出端。
数据输出部分112可以连接到其他图像处理装置、显示装置1(参考图13A)的控制器170(参考图13A)、或者后面描述的显示面板20(参考图13A)。因此,对数据输出部分112的实现没有限制。
参考图5,当需要输出第四行的图像数据时,第四行的图像数据可能没有存储在第三缓冲器105中。确定器111可以基于状态信息确定第四行的图像数据存储在第一缓冲器103和第二缓冲器104中。确定器111可以将诸如与实时处理条件中的违规有关的信息和与存储在缓冲器102、104和105中的图像数据有关的信息的确定信息发送到数据输出部分112。数据输出部分112可以接收存储在第二缓冲器104中的第四行的图像数据,其具有比存储在第一缓冲器103中的第四行的图像数据改进的图像质量,并且将第四行的图像数据输出到输出端。
根据实施例,数据输出部分112可以基于与图像处理的状态相关的确定结果,在同一行中的图像数据中选择具有最大改进的图像质量的图像数据。
例如,根据实施例,当在预定的指定时间段内第u行的图像数据被存储在第一缓冲器103、第二缓冲器104和第三缓冲器105中时,数据输出部分112可以选择存储在第三缓冲器105中的第u行的图像数据并输出该图像数据。再例如,当在预定的指定时间段内第u行图像数据被存储在第一缓冲器103和第二缓冲器104中时,数据输出部分112可以选择存储在第二缓冲器104中的第u行的图像数据并输出该图像数据。
又例如,当在预定的指定时间段内第u行图像数据仅被存储在第一缓冲器103中时,数据输出部分112可以选择存储在第一缓冲器103中的第u行的图像数据并输出该图像数据。
也就是说,根据实施例,由于图像处理装置100被提供有连接到数据输入101以及第一图像处理模块108和第二图像处理模块109中的至少一个的确定器111,因此图像处理装置100可以继续接收数据输入101以及第一图像处理模块108和第二图像处理模块109的状态信息,并确定图像处理的状态。根据实施例,由于图像处理装置100被提供有连接到第一缓冲器103、第二缓冲器104和第三缓冲器105的数据输出部分112,因此图像处理装置100可以基于确定结果选择存储在第一缓冲器103、第二缓冲器104和第三缓冲器105的任何一个中的图像数据,并输出该图像数据。因此,根据实施例,图像处理装置100满足实时处理条件,同时防止视觉伪像。
图7A是示出当出现视觉伪像时图像质量的示例变化的曲线图。参考图7A,当出现视觉伪像时,图像质量可能下降,而不是执行图像处理过程。
根据实施例,虽然图像处理的状态不满足实时处理条件,但是数据输出部分112可以通过输出第一缓冲器103中的图像数据来防止和/或减少视觉伪像的产生,如图7B所示。根据实施例,虽然图像处理的状态不满足实时处理条件,但是数据输出部分112可以通过输出第二缓冲器104中的图像数据而不中断地提供图像数据,如图7C所示。
确定器111或数据输出部分112可以收集与处理状态有关的状态信息和确定信息,并将状态信息和确定信息存储在数据库中。数据库可以实现为存储器。数据库可以提供在图像处理装置100中,或者替代地经由通信网络提供在外部服务器中。
例如,记录图像处理历史信息的日志文件可以存储在数据库中。在日志文件中,可以存储各种图像处理历史信息,诸如状态信息,例如,缓冲器102的存储速率、图像处理模块107的处理状态和处理速度、以及确定器111的确定信息。
因此,图像处理装置100的处理器可以分析存储在数据库中的数据并根据输入的图像数据估计工作负荷。图像处理装置100的处理器可以基于估计结果来设置图像处理过程的复杂度。例如,图像处理装置100的处理器可以随着估计的工作负荷高并且图像处理模块107的容量低而将图像处理过程的复杂度设置得更低。
例如,根据实施例,图像处理装置100可以防止图像数据的图像质量急剧下降以及管理图像处理装置100中的资源,从而稳定地再现图像。
上述工作负荷估计和复杂度的设置可以由确定器111或数据输出部分112以及处理器执行,因此对其实现没有限制。
根据实施例,图像处理装置100的实现不限于上述示例。
例如,根据实施例,除最终输出缓冲器之外,图像处理装置100还可以被提供有附加的辅助缓冲器,例如第三缓冲器105,并且附加的辅助缓冲器可以用作最终输出缓冲器的替代。
根据实施例,图像处理装置100可以被提供有另外提供的第四缓冲器113,并且用作第一缓冲器103的替代,如图8所示。
参考图8,第四缓冲器113可以连接到第一图像处理模块108和数据输出部分112之间。第一图像处理模块108可以输出图像数据并将图像数据分别存储在第二缓冲器104和第四缓冲器113中。
当不满足处理条件时,在执行第二图像处理过程之前,在第二缓冲器104中存在需要输出的图像数据的可能性很高。当相同的图像数据存储在第二缓冲器104和第一缓冲器103中时,存储在第二缓冲器104中的图像数据具有比存储在第一缓冲器103中的图像数据更高的图像质量。因此,根据实施例,第一图像处理模块108可以同时存储要在缓冲器102和第二缓冲器104中输出的图像数据,因此当在第四缓冲器113中不存在需要输出的图像数据时,数据输出部分112可以输出图像存储在第三缓冲器105中的数据。
存储在第二缓冲器104中的图像数据可以仅用于输入到第二图像处理模块109,并且存储在第一缓冲器103中的图像数据可以仅用于输入到第一图像处理模块108。因此,不需要第一缓冲器103和第二缓冲器104连接到数据输出部分112,并且不需要确定器111连接到第一图像处理模块108。因此,根据实施例,确定器111可以以少量计算导出确定结果,因此图像处理装置100可以具有简单的配置。
如图9所示,数据输出部分112可以连接到第一缓冲器103以及第三缓冲器105和第四缓冲器113。因此,数据输出部分112可以从第三缓冲器105、第四缓冲器113和第一缓冲器103中的任何一个选择图像数据,并输出该图像数据,并且实现方式不限于此。
例如,如图8所示的图像处理装置100可以使用第四缓冲器113作为第三缓冲器105的替代,并且如图9所示的图像处理装置100可以将第一缓冲器103和第四缓冲器113一起用作第三缓冲器105的替代。
参考图10,图像处理装置100还可包括辅助处理模块114。
存储在第一缓冲器103和第二缓冲器104中的图像数据可能不符合输出端所需的格式。例如,存储在第一缓冲器103和第二缓冲器104中的图像数据可以以与输出端所需的颜色空间格式不同的颜色空间格式构造,并且以与输出端要求的分辨率不同的分辨率形成。
当输出存储在第一缓冲器103和第二缓冲器104中的至少一个中的图像数据时,辅助处理模块114可以读取要输出的图像数据,然后执行被配置为转换输出端所需的格式的辅助处理过程。例如,辅助处理模块114可以执行转换空间颜色或转换分辨率的过程,例如,放大/缩小(up/down scaling)。
由辅助处理模块114执行的操作可以由数据输出部分112执行,并且辅助处理模块114不限于另外提供,如图10所示。
根据实施例,图像处理装置100的实现不限于包括多个缓冲器。例如,可以在图像处理装置100中提供单个缓冲器102a,如图11A所示。
缓冲器102a可以连接到数据输入101和第一图像处理模块108。缓冲器102a可以从第一图像处理模块108接收图像数据并存储图像数据。
可以从数据输入101和第一图像处理模块108向缓冲器102a输入关于相同区域的图像数据。在缓冲器102a中,可以根据图像处理水平(即,图像质量改进的程度)替换或改变所存储的图像数据。
例如,当从数据输入101输入的第f行的图像数据预先存储在缓冲器102a中时,由第一图像处理模块108处理的第f行的图像数据可以输入到缓冲器102a。此时,可以在缓冲器102a中删除从数据输入101输入的第f行的图像数据,并且可以将由第一图像处理模块108处理的第f行的图像数据存储在缓冲器102a中。因此,当需要输出第f行的图像数据时,根据是否允许从第二图像处理模块109输出第f行的图像数据,数据输出部分112可以选择性地从第二图像处理模块109或缓冲器102a的任何一个接收图像数据,并输出图像数据。
如图11B所示,图像处理装置100可以被提供有连接到数据输入101、第一图像处理模块108和第二图像处理模块109的单个缓冲器102b。
缓冲器102b可以存储从数据输入101、第一图像处理模块108和第二图像处理模块109输出的图像数据,并存储图像数据。此时,可以从数据输入101和第一图像处理模块108向缓冲器102b输入关于相同区域的图像数据。在缓冲器102b中,可以根据图像处理水平来替换所存储的图像数据。
例如,当从第一图像处理模块108输入的第g行的图像数据预先存储在缓冲器102b中时,由第二图像处理模块109处理的第g行的图像数据可以输入到缓冲器102b。此时,可以在缓冲器102b中删除从第一图像处理模块108输入的第g行的图像数据,并且可以将由第二图像处理模块109处理的第g行的图像数据存储在缓冲器102b中。也就是说,可以不存储连接到缓冲器102b的所有图像数据,但是可以按照图像处理水平替换存储在缓冲器102b中的图像数据。因此,根据实施例,图像处理装置100可以在应对快速输出的定时的同时有效地控制缓冲器102b的工作负荷。是否替换所存储的图像数据可以由数据输出部分112或确定器111确定,或者替代地,是否替换所存储的图像数据可以由缓冲器102b本身确定。
以下将描述如图12所示的显示装置作为显示装置的示例,但是稍后描述的实施例不限于此。因此,后面描述的实施例将应用于任何类型的显示装置,不管其形状,只要能够通过具有显示面板在视觉上向用户提供各种图像即可。
图12是示出根据本公开的实施例的显示装置的示例性外观的图,并且图13A和13B是示出根据各种示例实施例的示例显示装置的框图。在下文中,为了防止重复描述,将一起描述对它们的说明。
参考图12,显示装置1可包括:主体10,其形成显示装置1的外观并容纳形成显示装置1的各种组件;以及显示面板20,其向用户显示图像。
如图12所示的显示装置1可以根据支撑方法以立式或壁挂式实现。根据实施例,主体10可以通过壁挂式实现,例如使用支架安装在垂直表面(例如墙壁)中。根据另一个实施例,支架3可以提供在主体10的下部。主体10可以通过支架稳定地设置在平面上。
在主体10的前侧,可以提供从用户接收各种控制命令的输入的按钮组和根据用户控制命令显示图像的显示面板。
可以在主体10中提供各种组件以实现显示装置1的功能。下面将描述显示装置1的控制框图。
参考图13A,显示装置1可以包括:输入(例如,包括输入电路)118,其接收来自用户的各种控制命令的输入;内容接收器(例如,包括内容接收电路)120,从外部设备接收具有图像和声音的内容;声音输出部分(例如,包括声音输出电路)130,输出与包含在内容中的声音数据对应的声音;通信器(例如,包括通信电路)140,通过通信网络发送和接收各种数据,例如内容;图像处理器(例如,包括图像处理电路)150和图像处理装置(例如,包括图像处理电路)100,处理包含在内容中的图像数据;显示器160,显示与包含在内容中的图像数据相对应的图像;以及控制器(例如,包括处理电路)170,控制显示装置1的整体操作。
内容接收器120、通信器140、图像处理器150、图像处理装置100和控制器170中的至少一个可以集成在嵌入在图像处理装置100中的片上系统(SOC)中。然而,在图像处理装置100中提供的片上系统(SOC)的数量不限于一个,因此不限于将它们集成在单个片上系统(SOC)中。
输入118可以包括各种输入电路并从用户接收各种控制命令。
例如,如图13A所示,输入118可以包括按钮组119。根据实施例,按钮组119可以包括调节从声音输出部分130输出的声音的大小的音量按钮、改变内容接收器120接收的通信频道的频道按钮、和接通和断开显示装置1的电源的电源按钮。另外,输入118可以通过上述按钮组119从用户接收各种控制命令。
按钮组119中包含的各种按钮可以采用按压开关(push switch)和检测用户的压力的膜或检测用户身体部位的触摸的触摸开关。然而,按钮的类型不限于此,因此按钮组119可以采用各种输入工具,它们输出对应于用户的特定动作的电信号。
输入118可以包括各种输入电路,包括,例如但不限于,遥控器,被配置为远程接收用户控制命令,并且被配置为将用户控制命令发送到显示装置1。此外,输入118可以包括被配置为接收用户控制命令的众所周知的各种组件,但不限于此。当通过触摸屏类型实现显示面板20时,显示面板20可以作为输入118操作。
例如,输入118可以通过上述按钮组119和遥控器或以屏幕类型形成的显示面板20从用户接收关于显示装置1的控制命令。因此,输入118可以将接收的控制命令发送到控制器170,并且控制器170可以使用控制信号控制显示装置1的组件中的至少一个。将详细描述控制器170的详细说明。
内容接收器120可以包括各种内容接收电路,并从各种外部设备接收各种内容。例如,内容接收器120可以从以下设备接收内容:在无线通信中接收广播信号的天线、在有线和/或无线通信中接收广播信号以及适当地转换接收的广播信号的机顶盒、播放存储在多媒体存储介质中的内容的多媒体播放设备(例如,DVD播放器、CD播放器和蓝光播放器)。
例如,内容接收器120可以包括连接到外部设备的多个连接器121、用于在接收内容的多个连接器中选择要接收内容的路径的接收路径选择器123、以及选择要接收广播信号的频道(或频率)用于接收广播信号的调谐器125。
连接器121可包括:RF同轴电缆连接器,从天线接收包含内容的广播信号;高清晰度多媒体接口(HDMI)连接器,从机顶盒或多媒体播放器接收内容;分量视频连接器;复合视频连接器和D-Sub连接器。
接收路径选择器123可以在上述多个连接器121中选择要接收内容的连接器。例如,接收路径选择器123可以自动选择接收内容的连接器121,或者根据用户控制命令手动选择用于接收内容的连接器121。
调谐器125可以在接收广播信号时提取通过天线接收的各种信号中的特定频率(频道)的传输信号。换句话说,调谐器125可以根据用户的频道选择命令选择用于接收内容的频道(或频率)。
当经由调谐器125接收到关于所选频道的图像数据时,可以将图像数据发送到图像处理器150。因此,图像处理器150a和图像处理装置100中的至少一个可以通过图像处理从图像数据获得颜色数据和图像控制信号,显示器160可以基于颜色数据和图像控制信号在显示面板20上恢复图像。
此外,显示装置1可以提供有声音输出部分130。
声音输出部分130可以包括各种电路,并且响应于控制器170的控制信号从内容接收器120接收声音数据。声音输出部分130可以包括将电信号转换为声学信号的一个或多个扬声器131。
如图13A所示,显示装置1可以提供有通信器140。通信器140可以包括各种通信电路并通过具有支持无线通信系统的无线通信模块141和支持有线通信系统的有线通信模块143来支持各种通信系统。
通信系统可以包括无线通信系统和有线通信系统。无线通信系统是指被配置为经由无线方式发送和接收包含数据的信号的通信系统。此时,无线通信系统可以包括第3代(3G)、第4代(4G)、无线LAN(WLAN)、Wi-Fi、蓝牙、ZigBee、Wi-Fi直连(WFD)、Ultra宽带(UWB)、红外数据关联(IrDA)、蓝牙低能耗(BLE)、近场通信(NFC)或Z波,但不限于此。
例如,无线通信系统可以指通信系统,配置为经由有线方式发送和接收包含数据的信号。例如,有线通信系统可以包括外围组件互连(PCI)、PCI快速和通用串行总线(USB),但不限于此。控制器170可以通过控制信号控制通信器140的操作,以经由有线网络或无线网络下载各种内容,从而将内容提供给用户。
有线通信模块141和无线通信模块143可以分别在单个芯片中实现。然而,通信模块的实现不限于此。因此,有线通信模块141和无线通信模块143可以集成在单个芯片中。
参考图13A,显示装置1可以提供有图像处理器150a。图像处理器150a可以包括各种图像处理电路,并且对包含在从内容接收器120或通信器140接收的内容中的图像数据执行图像处理。
如图13A所示,图像处理器150a可以包括图形处理器151a和图形存储器155a。图形处理器151a和图形存储器155a可以分别在单独的芯片中实现。然而,图形处理器151a和图形存储器155a不限于分别实现为单独的芯片,因此图形处理器151a和图形存储器155a可以实现为单个芯片。
图形存储器155a可以存储用于图像处理的图像处理程序和经处理的颜色数据,或者临时存储从图形处理器151a输出的图像信息或从内容接收器120接收的图像信息。此外,在图形存储器155a中,还有与用于分析颜色数据的颜色模式的应用程序和算法有关的数据。
图形处理器151a可以通过使用存储在图形存储器155a中的图像处理程序处理存储在图形存储器155a中的图像数据,来获得恢复图像所需的各种数据。例如,图形处理器151a可以通过对存储在图形存储器155a中的内容中的图像数据执行图像处理来获得图像控制信号和颜色数据。
图像处理器150a和图像处理装置100可以分开地提供在显示装置1上,如图13A所示。此外,在图像处理装置100中执行的图像处理过程、用于在显示面板20上显示图像的各种图像处理可以由图像处理器150a执行。
又例如,图像处理装置100可以包含在图像处理器150b中,如图13B所示。在图像处理器150b的图形存储器155b中,可以存储用于图像质量改进的图像处理过程的程序和数据,并且图像处理器150b可以通过计算过程整体地执行上述图像处理过程和其他图像处理。除了改变操作的主体之外,图像处理过程的操作可以与上述描述相同,因此将省略其详细描述。
显示装置1可以提供有显示器160。参考图2,显示器160可包括显示驱动器19和显示面板20。
显示驱动器19可以根据控制器170的控制信号从图像处理器150或图像处理装置100接收图像数据,并且驱动显示面板20,使得显示面板20可以显示与接收的数据对应的图像。稍后将描述控制器170的详细说明。
显示面板20可以由阴极射线管(CRT)显示面板、液晶显示器(LCD)面板、发光二极管(LED)面板、有机发光二极管(OLED)、等离子体显示面板(PDP)或场发射显示(FED)面板实现,但不限于此。
显示面板20可包括多个像素。像素是构成要在显示面板20上显示的图像的最小单位,并且被称为点。在下文中为了便于描述,将统一使用像素进行描述。每个像素可以接收指示图像数据的电信号,并输出与接收的电信号对应的光信号。因此,可以组合从包含在显示面板20中的多个像素输出的光信号,从而可以在显示面板20上显示图像数据。
控制器170可以提供在显示装置1中。控制器170可以包括处理器171和存储器173,如图13A所示。
存储器173可以存储用于控制显示装置1的操作的控制程序和控制数据,并且临时存储经由输入118输入的控制命令或由处理器171输出的控制信号。
处理器171可以包括各种处理电路并控制显示装置1的整体操作。处理器171可以产生用于控制显示装置1的每个组件以控制每个组件的操作的控制信号。
例如,处理器171可以通过控制信号控制通信器140,使得通信器140可以向外部设备发送包括数据的信号和从外部设备接收包括数据的信号。根据另一实施例,处理器171可以响应于通过输入118输入的声音控制命令将控制信号发送到声音输出部分130,以便允许调节通过扬声器151输出的声音的大小。
又例如,处理器171可以控制图像处理器150a和图像处理装置100中的至少一个,使得图像处理器150a和图像处理装置100中的至少一个可以对从内容接收器120接收的内容执行图像处理,并且处理器171可以控制显示器160,使得显示器160显示经处理的图像。
根据实施例,处理器171可以通过控制信号控制图像处理装置100,以允许执行图像处理过程,从而改进从内容接收器120接收的内容的图像质量。处理器171可以通过控制信号控制显示器160,使得显示器160显示具有改进的图像质量的图像。
处理器171可以根据存储在存储器173中的控制程序处理存储在存储器173中的各种数据。在此之前,处理器171和存储器173分别被描述为分离的芯片。然而,处理器171和存储器173的配置不限于此,因此处理器171和存储器173可以实现为单个芯片。
图13A的图像处理器150a的一些或全部组件或图13B的图像处理器150b的一些或全部组件可以包括在控制器170中。也就是说,控制器170可以整体地或部分地执行图13A的图像处理器150a的操作或图13B的图像处理器150b的操作,但不限于此。由于在操作相同的同时仅将上述操作的主体从图像处理器150a和150b或图像处理装置100切换到控制器170,因此将省略详细描述。
除了图13A的图像处理装置100与图像处理器150a分离、并且图13B的图像处理装置100包含在图像处理器150b中之外,图13A的图像处理装置100和图13B的图像处理装置100可以相同,因此,将省略图13B的图像处理装置100的详细描述。在下文中,将描述图像处理装置100和显示装置1的操作流程。
图14是示出根据示例实施例的操作图像处理装置的示例方法的流程图。
图像处理装置可以比较多个图像处理模块的状态信息以确定图像处理条件(1300)。图像处理装置可以通过一系列图像处理过程(例如,解码、降噪和对比度增强)来改进图像质量。
图像数据的图像质量可以随着通过多个图像处理模块而逐渐改进。因此,关于相同位置的图像数据可以存储在连接到多个图像处理模块的多个缓冲器中的任何一个缓冲器和至少另一个缓冲器中,其中两个图像数据之间的唯一差异是图像质量。
根据实施例,图像处理装置100可以基于多个图像处理模块的状态信息确定是否以正常方式执行图像处理,例如,满足实时处理条件。已经描述了获得图像处理模块的状态信息的方法,因此将不再重复其描述。
图像处理装置100可以基于图像处理的状态的确定结果,选择从多个图像处理模块中的任何一个图像处理模块中输出的图像数据,并输出所选择的图像数据(1310)。
例如,当满足实时处理条件时,图像处理装置可以选择具有最大改进图像质量的图像数据,从缓冲器接收图像数据,并输出图像数据。然而,在需要输出特定行的图像数据的状态下,当不满足实时处理条件时,图像处理装置可以从存储在另一个缓冲器中的特定行的图像数据中选择具有最大改进图像质量的图像数据,从缓冲器接收图像数据,并输出图像数据。
根据实施例,图像处理装置提供有存储从多个图像处理模块输出的图像数据的缓冲器,因此可以防止其中在图像上重复显示相同行的图像数据的视觉伪像。根据实施例,图像处理装置可以输出在存储在缓冲器中的图像数据中具有最大改进图像质量的图像数据,从而尽可能地确保图像的图像质量。
图15是示出根据本公开示例实施例的操作显示装置的示例方法的流程图。
显示装置可以通过比较多个图像处理过程的状态信息来确定图像处理的状态,并且基于确定结果来选择从多个图像处理模块中的任何一个图像处理模块输出的图像数据(1400)。如上所述,图像处理装置可以嵌入在显示装置中。图像处理装置可以包含在显示装置的图像处理器中,或者图像处理装置可以与图像处理器分离,因此图像处理装置可以通过划分图像处理过程来利用图像处理器执行图像处理过程。与步骤1400相关的描述可以与步骤1300和1310相同,因此将省略其详细描述。
图像处理装置可以在显示面板上显示所选择的图像数据(1410)。例如,当通过图像处理器或图像处理装置的输出端输出所选择的图像数据时,显示装置的显示驱动器可以接收输出的图像数据并控制显示面板,使得显示面板显示对应于接收的图像数据的图像。
从以上描述中显而易见的是,根据所提出的图像处理装置、显示装置和控制显示装置的方法,可以防止和/或减少图像数据的图像质量的快速降低,尽管不满足实时处理条件。
从以上描述中显而易见的是,根据所提出的图像处理装置、显示装置和控制显示装置的方法,可以使用通过收集状态信息产生的历史信息来设置图像处理过程,从而可以有效地执行图像处理过程,同时防止和/或减少计算的过载。
尽管已经说明和描述了本公开的各种示例实施例,但是本领域技术人员将理解,在不脱离本公开的原理和精神的情况下,可以在这些实施例中进行改变,本公开的范围在权利要求及其等同物中限定。

Claims (10)

1.一种显示装置,包括:
多个图像处理模块,被配置为执行图像处理过程;
控制器,被配置为基于从所述多个图像处理模块的任何一个图像处理模块接收到的状态信息,选择由所述多个图像处理模块中的任何一个图像处理模块处理的图像数据;以及
显示器,被配置为显示所选择的图像数据,
其中,所述多个图像处理模块包括:
第一图像处理模块,被配置为对图像数据执行第一图像处理过程;以及
第二图像处理模块,被配置为对从所述第一图像处理模块输出的图像数据执行第二图像处理过程,并且
其中,所述控制器被配置为当确定图像处理状态不是正常状态时,选择需要从所述第一图像处理模块输出的关于区域的图像数据,并且
当确定图像处理状态是正常状态时,选择需要从所述第二图像处理模块输出的关于所述区域的图像数据。
2.如权利要求1所述的显示装置,其中,
所述多个图像处理模块中的每一个连接到存储从所述多个图像处理模块输出的图像数据的相应缓冲器,并且所述控制器被配置为基于所述多个图像处理模块的状态信息,选择连接到所述多个图像处理模块的缓冲器中的任何一个缓冲器,并输出存储在所选择的缓冲器中的图像数据。
3.如权利要求1所述的显示装置,其中,
所述控制器被配置为从所述多个图像处理模块接收状态信息,并且通过比较接收的状态信息来确定图像处理状态是否处于正常状态,其中正常状态是正常输出需要被输出的关于区域的图像数据的状态。
4.如权利要求1所述的显示装置,其中,
所述控制器被配置为使用所述多个图像处理模块的状态信息来估计工作负荷,并且基于估计的工作负荷来设置图像处理过程的复杂度。
5.如权利要求1所述的显示装置,还包括:
缓冲器,连接到所述多个图像处理模块,并被配置为接收由所述多个图像处理模块处理的图像数据,并存储图像数据,其中,当从所述多个图像处理模块中的至少一个输入与预先存储在缓冲器中的图像数据对应于相同区域的图像数据时,所述控制器被配置为用所述对应于相同区域的图像数据替换预先存储在缓冲器中的图像数据。
6.如权利要求1所述的显示装置,其中,
所述多个图像处理模块被配置为执行不同的相应图像处理过程。
7.一种显示装置的控制方法,包括:
基于从多个图像处理模块的任何一个图像处理模块接收到的状态信息,选择由所述多个图像处理模块中的任何一个图像处理模块处理的图像数据;以及
显示所选择的图像数据,
其中,所述多个图像处理模块包括:
第一图像处理模块,被配置为对图像数据执行第一图像处理过程;以及
第二图像处理模块,被配置为对从所述第一图像处理模块输出的图像数据执行第二图像处理过程,并且
其中,所述输出还包括:
当确定图像处理状态不是正常状态时,选择需要从所述第一图像处理模块输出的关于区域的图像数据,并且
当确定图像处理状态是正常状态时,选择需要从所述第二图像处理模块输出的关于所述区域的图像数据。
8.如权利要求7所述的控制方法,其中,
所述多个图像处理模块中的每一个连接到存储从所述多个图像处理模块输出的图像数据的相应缓冲器,并且所述输出还包括:基于所述多个图像处理模块的状态信息,选择连接到所述多个图像处理模块的缓冲器中的任何一个缓冲器,并输出存储在所选择的缓冲器中的图像数据。
9.如权利要求7所述的控制方法,其中,
所述输出还包括:通过从所述多个图像处理模块接收状态信息,并且通过比较接收的状态信息来确定图像处理状态是否处于正常状态,其中正常状态是正常输出需要被输出的关于区域的图像数据的状态。
10.如权利要求7所述的控制方法,其中,
所述多个图像处理模块连接到缓冲器,所述缓冲器接收由所述多个图像处理模块处理的图像数据,并存储图像数据,并且所述输出还包括:当从所述多个图像处理模块中的至少一个输入与预先存储在缓冲器中的图像数据对应于相同区域的图像数据时,基于图像处理水平确定是否用所述对应于相同区域的图像数据替换预先存储在缓冲器中的图像数据。
CN201780058450.8A 2016-09-23 2017-09-20 图像处理装置、显示装置及其控制方法 Active CN109791755B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2016-0122277 2016-09-23
KR1020160122277A KR102176723B1 (ko) 2016-09-23 2016-09-23 영상처리 장치, 디스플레이 장치, 및 그 제어방법
PCT/KR2017/010320 WO2018056693A1 (en) 2016-09-23 2017-09-20 Image processing appratus, display apparatus and method of controlling thereof

Publications (2)

Publication Number Publication Date
CN109791755A CN109791755A (zh) 2019-05-21
CN109791755B true CN109791755B (zh) 2022-04-19

Family

ID=61685608

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780058450.8A Active CN109791755B (zh) 2016-09-23 2017-09-20 图像处理装置、显示装置及其控制方法

Country Status (4)

Country Link
US (1) US10713993B2 (zh)
KR (1) KR102176723B1 (zh)
CN (1) CN109791755B (zh)
WO (1) WO2018056693A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112188034A (zh) * 2020-09-29 2021-01-05 北京小米移动软件有限公司 一种图像处理方法、装置、终端设备及介质
US11636828B1 (en) * 2022-02-28 2023-04-25 Freedom Scientific, Inc. System and method for automatically adjusting a color filter of an interface

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0215428A2 (en) * 1985-09-13 1987-03-25 Hitachi, Ltd. Graphic processing system
EP0837449A2 (en) * 1996-10-17 1998-04-22 International Business Machines Corporation Image processing system and method
CN1448843A (zh) * 2002-03-19 2003-10-15 富士施乐株式会社 图像处理装置和图像处理方法
CN1873689A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理设备、方法和存储有程序的存储介质
CN1873690A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理设备、方法和存储有程序的存储介质
CN1873691A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理装置、方法以及存储程序的存储介质
CN101515994A (zh) * 2008-02-22 2009-08-26 联发科技股份有限公司 图像处理装置及其方法
CN103369239A (zh) * 2012-03-28 2013-10-23 三星电子株式会社 摄像机设备的图像处理装置和方法
CN104765594A (zh) * 2014-01-08 2015-07-08 联发科技(新加坡)私人有限公司 一种显示图形用户界面的方法及装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0666542A3 (en) * 1994-02-04 1996-05-15 Fuji Facom Corp Multimedia system for monitoring and controlling processes.
KR100251550B1 (ko) * 1997-12-17 2000-04-15 구자홍 고해상도 액정표시구동장치
JP2002040977A (ja) * 2000-07-21 2002-02-08 Sony Corp 陰極線管および画像制御装置
US7222355B2 (en) 2000-12-15 2007-05-22 Lockheed Martin Corporation Multi-mode video processor
US7656410B2 (en) 2006-03-31 2010-02-02 Intel Corporation Image buffering techniques
KR100928755B1 (ko) * 2007-09-17 2009-11-25 매그나칩 반도체 유한회사 휘도 조절이 가능한 영상표시장치 및 영상표시방법
US8665281B2 (en) 2008-02-07 2014-03-04 Microsoft Corporation Buffer management for real-time streaming
EP2388771B1 (en) * 2010-05-18 2019-10-16 Seiko Epson Corporation Image-displaying device and display control circuit
JP5163702B2 (ja) * 2010-06-16 2013-03-13 セイコーエプソン株式会社 撮影装置およびタイミング制御回路
EP2611152A3 (en) * 2011-12-28 2014-10-15 Samsung Electronics Co., Ltd. Display apparatus, image processing system, display method and imaging processing thereof
KR101905648B1 (ko) * 2012-02-27 2018-10-11 삼성전자 주식회사 카메라 장치의 동영상 촬영방법 및 장치
US20140176548A1 (en) 2012-12-21 2014-06-26 Nvidia Corporation Facial image enhancement for video communication
KR20140122835A (ko) * 2013-04-11 2014-10-21 삼성전자주식회사 프로세스 병렬 처리 장치 및 방법
US10283091B2 (en) 2014-10-13 2019-05-07 Microsoft Technology Licensing, Llc Buffer optimization
JP6537265B2 (ja) 2014-12-11 2019-07-03 キヤノン株式会社 画像処理装置、画像処理装置の制御方法
JP6613587B2 (ja) 2015-03-20 2019-12-04 株式会社リコー 画像処理システム、画像形成出力制御装置、画像処理方法及び画像処理プログラム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0215428A2 (en) * 1985-09-13 1987-03-25 Hitachi, Ltd. Graphic processing system
EP0837449A2 (en) * 1996-10-17 1998-04-22 International Business Machines Corporation Image processing system and method
CN1448843A (zh) * 2002-03-19 2003-10-15 富士施乐株式会社 图像处理装置和图像处理方法
CN1873689A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理设备、方法和存储有程序的存储介质
CN1873690A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理设备、方法和存储有程序的存储介质
CN1873691A (zh) * 2005-06-03 2006-12-06 富士施乐株式会社 图像处理装置、方法以及存储程序的存储介质
CN101515994A (zh) * 2008-02-22 2009-08-26 联发科技股份有限公司 图像处理装置及其方法
CN103369239A (zh) * 2012-03-28 2013-10-23 三星电子株式会社 摄像机设备的图像处理装置和方法
CN104765594A (zh) * 2014-01-08 2015-07-08 联发科技(新加坡)私人有限公司 一种显示图形用户界面的方法及装置

Also Published As

Publication number Publication date
KR20180032941A (ko) 2018-04-02
WO2018056693A1 (en) 2018-03-29
KR102176723B1 (ko) 2020-11-10
CN109791755A (zh) 2019-05-21
US20180090047A1 (en) 2018-03-29
US10713993B2 (en) 2020-07-14

Similar Documents

Publication Publication Date Title
US9875522B2 (en) Display control apparatus
US20170053622A1 (en) Method and apparatus for setting transparency of screen menu, and audio and video playing device
US9832421B2 (en) Apparatus and method for converting a frame rate
EP2779622A1 (en) Electronic device and method for processing image
CN109496428B (zh) 显示装置和记录介质
EP3337173A1 (en) Image providing apparatus, control method thereof, and image providing system
US20190037100A1 (en) Image processing device, image processing method, and program
EP3021213A1 (en) Display apparatus and display methods thereof
CN109791755B (zh) 图像处理装置、显示装置及其控制方法
US9774821B2 (en) Display apparatus and control method thereof
US20120001913A1 (en) Computer system and control method thereof
US10110887B2 (en) Display diagnostics for enhancing performance of display devices
US8760583B1 (en) Apparatus and method for processing video signal
US9904980B2 (en) Display apparatus and controller and method of controlling the same
US7853878B2 (en) System and method for the control of image processing and storing devices
US20150221078A1 (en) Calibration device, display system and control method thereof
US20140009501A1 (en) Display apparatus and control method thereof
CN113316022B (zh) 视频播放方法、装置、设备、系统和存储介质
US10621899B2 (en) Display apparatus and method of controlling thereof
JP2016163127A (ja) 画像表示装置
KR20100005273A (ko) 멀티비전 시스템 및 그 화면 구현 방법
US20190050962A1 (en) Display control system and display control method
KR102164543B1 (ko) 디스플레이 장치 및 디스플레이 방법
KR102118523B1 (ko) 전자 장치 및 그 제어 방법
EP2493201A2 (en) Video display method and video display apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant