CN107113464B - 内容提供装置、显示装置及其控制方法 - Google Patents

内容提供装置、显示装置及其控制方法 Download PDF

Info

Publication number
CN107113464B
CN107113464B CN201580070269.XA CN201580070269A CN107113464B CN 107113464 B CN107113464 B CN 107113464B CN 201580070269 A CN201580070269 A CN 201580070269A CN 107113464 B CN107113464 B CN 107113464B
Authority
CN
China
Prior art keywords
region
information
image
regions
original image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580070269.XA
Other languages
English (en)
Other versions
CN107113464A (zh
Inventor
姜羽锡
金峰照
朴世赫
闵钟述
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107113464A publication Critical patent/CN107113464A/zh
Application granted granted Critical
Publication of CN107113464B publication Critical patent/CN107113464B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration by the use of local operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/23—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding with coding of regions that are present throughout a whole video segment, e.g. sprites, background or mosaic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了一种内容提供装置。该内容提供装置包括：通信单元，用于与外部装置通信；图像处理单元，用于通过对输入的原始图像进行图像处理生成压缩图像；以及控制单元，用于基于图像质量特征将原始图像划分成一个或多个区域、从相应区域获得每个区域的特征信息、以及将获得的每个区域的特征信息与压缩图像一起传输至外部装置。因此，显示装置可通过在传输图像前在生成和编码步骤中提取改进图像质量所需的信息并且将其与压缩图像一起传输来执行图像质量改进操作，以使图像接近原始图像水平。

Description

内容提供装置、显示装置及其控制方法
技术领域
本发明构思大体涉及内容提供装置、显示装置及控制内容提供装置和显示装置的方法，更具体地，涉及用于执行图像质量改进操作的内容提供装置、显示装置及控制该内容提供装置和显示装置的方法。
背景技术
随着电子技术的发展，已经开发并广泛使用了各种类型的电子装置。具体地，诸如电视机(TV)、移动电话、个人计算机(PC)、膝上型PC、个人数字助理(PDA)等多种显示装置在许多家庭中均被广泛使用。
随着对显示装置使用的增多，对更多功能的用户需求也在增长。因此，制造者付出了更大努力来满足用户需求，并且具有新功能的产品接连面世。
通过新功能，在显示装置中执行的功能变得更多种多样。具体地，显示装置可对接收的图像进行解码、重构图像、分析重构的图像的特征、执行图像处理操作(例如：降噪；细节、对比度以及颜色或灰度系数的改进操作)以及显示图像。
然而，这种传统处理方法是基于没有与原始图像有关的信息的假设来执行的，从而与原始图像相比产生了诸多差异。
此外，在图像生成过程中，显示装置不接收与期望的图像质量特征有关的任何信息，因此显示装置可能根据每个显示装置的预设指令处理图像质量。因此，图像可能失真或过度强调。
发明内容
技术问题
本公开被提供以解决在相关领域中出现的上述和其他问题以及缺点，且本公开的方面提供通过考虑原始图像的图像质量执行图像质量改进操作的内容提供装置、显示装置及控制内容提供装置和显示装置的方法。
技术方案
根据本公开的实施方式，提供了内容提供装置。内容提供装置包括：通信单元，配置为与外部装置通信；图像处理单元，配置为通过对输入的原始图像进行图像处理来生成压缩图像；以及控制单元，配置为基于图像质量特征将原始图像划分成一个或多个区域、从相应区域获得用于每个区域的特征信息、以及控制通信单元将获得的每个区域的特征信息与压缩图像一起传输至外部装置。
控制单元可以像素来划分原始图像并且可通过基于与相应像素有关的像素信息来分组像素，从而将像素划分成一个或多个区域。
每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定划分出的相应区域的划分信息、每个区域的与相应区域的图像质量特征有关的图像质量信息、每个区域的与在相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与相应区域的预定图像质量特征有关的意向信息以及每个区域的用于区分相应区域的语义信息。
每个区域的划分信息可包括与所划分出的相应区域之中原始图像的相应像素所属的区域有关的信息。与原始图像的相应像素所属的区域有关的信息可包括以下至少之一：与每个区域的特征参数有关的信息和与相应区域的像素坐标有关的信息。
控制单元可基于图像质量特征将压缩图像划分成与原始图像的划分出的区域对应的区域、从压缩图像的划分出的相应区域获得每个区域的特征信息、以及传输获得的压缩图像的每个区域的特征信息。
控制单元可生成并且传输用于对压缩图像与原始图像的每个区域的特征信息进行同步的同步信息。
根据本公开的实施方式，提供了显示装置。显示装置包括显示单元、接收单元和控制单元，其中，接收单元配置为接收原始图像的每个区域的特征信息和原始图像的压缩图像，控制单元配置为通过基于每个区域的特征信息将压缩图像的像素分组来将多个像素划分到一个或多个区域、对划分出的相应区域执行图像质量改进操作、以及控制显示单元显示改进的图像。
原始图像的每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定原始图像的划分出的相应区域的划分信息、每个区域的与原始图像的相应区域的图像质量特征有关的图像质量信息、每个区域的与在原始图像的相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与原始图像的相应区域的预定图像质量特征有关的意向信息、以及每个区域的用于识别原始图像的相应区域的语义信息。
控制单元可基于每个区域的划分信息确定压缩图像的多个相应像素属于哪个区域，并且可基于每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一对压缩图像的相应区域执行图像质量改进操作。
接收单元可接收压缩图像的每个区域的特征信息。控制单元可基于原始图像的每个区域的特征信息和压缩图像的每个区域的特征信息对压缩图像执行图像质量改进操作。
接收单元可接收用于对压缩图像与每个区域的特征信息进行同步的同步信息。控制单元可基于同步信息执行对压缩图像与每个区域的特征信息进行的同步，以及可基于每个区域的特征信息对压缩图像执行图像质量改进操作。
根据本公开的实施方式，提供了控制内容提供装置的方法。方法包括：通过对输入的原始图像进行图像处理生成压缩图像；基于图像质量特征将原始图像划分成一个或多个区域并从相应区域获得每个区域的特征信息；以及将获得的每个区域的特征信息与压缩图像一起传输至外部装置。
获得每个区域的特征信息可包括以像素划分原始图像并且通过基于与相应像素有关的像素信息来分组像素，从而将像素划分到一个或多个区域。
每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定划分出的相应区域的划分信息、每个区域的与相应区域的图像质量特征有关的图像质量信息、每个区域的与在相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与相应区域的预定图像质量特征有关的意向信息、以及每个区域的用于识别相应区域的语义信息。
每个区域的划分信息可包括与划分出的相应区域之中原始图像的相应像素所属的区域有关的信息。与原始图像的相应像素所属的区域有关的信息可包括与每个区域的特征参数有关的信息和与相应区域的像素坐标有关的信息中的至少之一。
获得用于每个区域的特征信息可包括基于图像质量特征将压缩图像划分成与原始图像的划分出的区域对应的区域、从压缩图像的划分出的相应区域获得每个区域的特征信息、以及传输获得的压缩图像的每个区域的特征信息。
本方法还可包括生成并且传输用于对压缩图像与每个区域的特征信息进行同步的同步信息。
根据本公开的实施方式，提供了一种控制显示装置的方法。该方法包括：接收原始图像的每个区域的特征信息和原始图像的压缩图像；通过基于每个区域的特征信息对压缩图像的像素进行分组来将多个像素划分到一个或多个区域并且对划分出的相应区域执行图像质量改进操作；以及显示改进的图像。
每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定原始图像的划分出的相应区域的划分信息、每个区域的与原始图像的相应区域的图像质量特征有关的图像质量信息、每个区域的与在原始图像的相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与原始图像的相应区域的预确定图像质量特征有关的意向信息、以及每个区域的用于识别原始图像的相应区域的语义信息。
执行图像质量改进操作可包括基于每个区域的划分信息确定压缩图像的多个相应像素属于哪个区域并且基于每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一对压缩图像的相应区域执行图像质量改进操作。
技术效果
根据上文所述的多种实施方式，显示装置可在传输前在生成图像并且对图像编码的同时提取图像质量改进所需的信息并且可将提取的信息与压缩图像一起传输。因此，显示装置可执行接近原始图像的图像质量改进操作。
附图说明
图1是示出根据本文中公开的实施方式的内容提供装置的结构的框图；
图2是为描述根据本文中公开的实施方式的区域划分而提供的图示；
图3是示出根据本文中公开的实施方式的每个区域的像素的图示；
图4是示出根据本文中公开的实施方式的内容提供装置的详细结构的框图；
图5是为描述根据本文中公开的实施方式的内容提供装置的具体处理操作而提供的图示；
图6是示出根据本文中公开的实施方式的显示装置的结构的框图；
图7是示出根据本文中公开的实施方式的控制单元630的详细结构的图示；
图8是为描述根据本文中公开的实施方式的显示装置的处理操作而提供的图示；
图9是示出根据本文中公开的实施方式用于图像质量改进操作的系统的结构的图示；
图10是为描述根据本文中公开的实施方式在中间传输阶段中执行的操作而提供的图示；
图11是为描述根据本文中公开的实施方式用于控制内容提供装置的方法而提供的流程图；以及
图12是为描述根据本文中公开的实施方式用于控制显示装置的方法而提供的流程图。
具体实施方式
以下参照附图更详细地描述某些实施方式。在下面的描述中，即使在不同的附图中，相同的附图参考标号也用于相同的元件。在说明书中限定的内容(诸如详细的结构和元件)被提供以帮助全面理解实施方式。然而，实施方式可在没有这些具体限定的内容的情况下实施。另外，由于公知的功能或结构会因为不必要的细节而使本申请不清楚，因此未详细描述公知的功能或结构。
图1是示出根据本文中公开的实施方式的内容提供装置的结构的框图。
参照图1，内容提供装置100包括通信单元110、图像处理单元120和控制单元130。内容提供装置100可实现为不同类型的电子装置，诸如广播发射机、机顶盒、TV、台式PC、膝上型PC等。
通信单元110可与外部装置通信。在这样的情况下，外部装置指代接收并显示从内容提供装置100传输的图像以及与图像有关的信息的装置。在下文中将提供与外部装置有关的详细描述。
具体地，通信单元110可根据例如有线和/或无线局域网(LAN)、广域网(WAN)、以太网、蓝牙、无线个域网、通用串行总线(USB)、电气与电子工程协会(IEEE)1394、无线保真(Wi-Fi)等多种通信方法与外部装置通信。为了实现此目的，通信单元110可包括与每种通信方法对应的芯片或输入端口。例如，通信单元110可包括有线LAN卡(未示出)和输入端口(未示出)以根据有线LAN方法执行通信。
图像处理单元120可通过对输入的原始图像进行图像处理来生成压缩的图像。例如，原始图像可经由通信单元110输入或可从诸如USB存储器的存储介质获得。
控制单元130可基于图像质量特征将原始图像划分成一个或多个区域、从相应区域获得每个区域的特征信息并且控制通信单元110将获得的每个区域的特征信息与压缩的图像一起发送至外部装置。
具体地，控制单元130可通过基于与相应像素有关的像素信息来分组像素，从而将像素划分到一个或多个区域来划分原始图像。将参照附图2在下文中更详细地描述该操作。
图2是为描述根据本文中公开的实施方式的区域划分而提供的图示。
参照图2，原始图像210可包括多个像素。此外，原始图像210可包括各种对象。在图2中，例如，原始图像210包括诸如天空、建筑物、草坪、大地和人的对象。
诸如天空、建筑物、草坪、大地和人的对象分别具有不同的图像质量特征。例如，如草坪的这种对象不需要由轮廓清晰的边界限定，并因此具有具备较高频率的精细细节信息的图像质量特征。相反，如建筑物或人的这种对象需要由能够被观察者识别的轮廓清晰的边界限定，并因此具有具备较低频率的粗略细节信息的图像质量特征。
因此，控制单元130可通过基于与相应像素有关的像素信息(即相应像素的图像质量特征)来分组像素，从而将原始图像210的像素划分到一个或多个区域。
例如，在图2中，形成草坪的像素包括成绿色调的颜色信息并且具有彼此相似的图像质量特征，其中，所述图像质量特征具有具备较高频率的精细细节信息。根据该区别性，控制单元130可基于相似的颜色信息和图像质量特征将像素分组到一个区域。此外，形成建筑物的像素包括成灰色调的颜色信息并且具有彼此相似的图像质量特征，其中，所述图像质量特征具有具备较低频率的密集细节信息。根据该区别性，控制单元130可基于相似的颜色信息和图像质量特征将像素分组到一个区域。
因此，控制单元130可基于相似的颜色信息和图像质量特征将原始图像210的多个像素分组到一个或多个区域221、222、223、224、225。
图2中下方的图220示出了原始图像210的相应像素基于与相应像素有关的像素信息被分组到多个区域221、222、223、224、225的示例。因此，原始图像210可被显示为具有不同图像质量特征的多个区域221、222、223、224、225。
在图2中，控制单元130基于相似的颜色信息和图像质量特征将原始图像210的多个像素分组到一个或多个区域。然而，将多个像素分组到一个或多个区域的标准不限于此。毋庸置疑，可通过多种标准将多个像素分组到一个或多个区域。
图3是示出根据本文中公开的实施方式的每个区域中的像素的图示。
如上文结合图2所描述的，控制单元130可基于相似的颜色信息和图像质量特征将原始图像210的多个像素分组到一个或多个区域221、222、223、224、225。在这样的情况下，控制单元130可将与相应区域221、222、223、224、225的像素221-1、222-1、223-1、224-1、225-1有关的信息传输至外部装置，以使得外部装置能够确定多个像素属于哪个区域。在下文中将更详细地描述该操作。
控制单元130可获得来自相应区域221、222、223、224、225中的每个区域的特征信息。
在这种情况下，每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定划分出的相应区域的划分信息、每个区域的与相应区域的图像质量特征有关的图像质量信息、每个区域的与在相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与相应区域的预定图像质量特征有关的意向信息以及每个区域的用于识别相应区域的语义信息。
在这种情况下，每个区域的划分信息可包括与划分出的相应区域之中原始图像的相应像素所属的区域有关的信息。每个区域的划分信息可用作基础数据，所述基础数据用于接收显示装置以最小的成本确定相应像素所属的区域。
具体地，与相应像素所属的区域有关的信息可包括与每个区域的特征参数有关的信息和与相应区域的像素坐标有关的信息中的至少一个。例如，与每个区域的特征参数有关的信息可包括诸如相应区域的像素的颜色质心值或颜色差异值的统计特征值。相应区域的像素坐标可包括诸如相应区域的边界坐标、中心坐标、最大区域坐标和最小区域坐标的几何特征值。
具体地，与每个区域的特征参数有关的信息可以与相应区域的像素的颜色值和颜色变化的统计数值有关。接收显示装置可比较原始图像的相应像素的颜色值和颜色差异的统计数值，并且确定具有相似统计数值的像素属于同一区域，从而确定相应像素属于哪个区域。
与相应区域的像素坐标有关的信息可包括形成相应区域的边界的像素的坐标、形成相应区域的中心部分的像素的坐标、形成最大区域的像素的坐标、形成最小区域的像素的坐标等。接收显示装置可基于像素的坐标确定相应像素属于哪个区域。
此外，每个区域的划分信息可包括诸如区域的消失或产生标记的、基于时间的特征值。特征值可用于在接收显示装置中保持相应区域的图像质量的一致性。
参照图3，形成与诸如天空的对象221对应的区域的像素221-1的质心值和差异值主要指示蓝色。形成与诸如建筑物的对象222对应的区域的像素222-1的质心值和差异值主要指示灰色。形成与诸如草坪的对象223对应的区域的像素223-1的质心值和差异值主要指示绿色。形成与诸如人的对象224对应的区域的像素224-1的质心值和差异值主要指示杏黄色。此外，形成与诸如大地的对象225对应的区域的像素225-1的质心值和差异值主要指示棕色。
如上所述，控制单元130可将形成分别与关于天空、建筑物、草坪、人和大地的对象对应的区域221、222、223、224、225的像素的质心值和差异值传输至接收显示装置。因此，接收显示装置可基于所接收的、像素的质心值和差异值来确定相应像素属于分别与关于天空、建筑物、草坪、人和大地的对象对应的区域221、222、223、224、225之中的哪个区域。
控制单元130可将这样的信息直接传输至接收显示装置，该信息指示形成与关于天空的对象对应的区域221的像素221-1的坐标值为(20，50)、形成与关于建筑物的对象对应的区域222的像素222-1的坐标值为(25，40)、形成与关于草坪的对象对应的区域223的像素223-1的坐标值为(30，20)、形成与关于人的对象对应的区域224的像素224-1的坐标值为(20，25)、形成与关于大地的对象对应的区域225的像素225-1的坐标值为(27，10)的信息。因此，接收显示装置可确定像素221-1、222-1、223-1、224-1、225-1的准确位置和区域。
此外，每个区域的图像质量信息可与每个区域的图像质量特征有关。每个区域的图像质量信息可包括以下信息中的至少之一：与每个区域的随机噪声水平以及块效应的产生位置和尺寸有关的噪声信息、与每个区域的分级频率大小和纹理有关的细节信息、每个区域的应用超分辨率来复原边缘特征的梯度剖面信息、每个区域的应用基于实例的超分辨率来复原纹理的纹理数据库索引信息、与每个区域的时域闪烁程度有关的闪烁信息、与每个区域的平均运动矢量和运动一致性有关的运动信息以及与每个区域的平均深度和平均深度矢量有关的深度信息。
与每个区域的一定水平的随机噪声以及块效应的产生位置和尺寸有关的噪声信息可以为用于执行适合于每个区域的噪声特征的降噪的基础数据。举例来说，与诸如天空的对象对应的区域221不应具有太多噪声，因此需要加强降低噪声。与诸如草坪的对象对应的区域223可具有一些噪声，并因此可以不那么强烈地执行降噪。也就是说，每个区域的噪声信息可包括促进适合于每个区域的噪声特征的降噪的基础数据。
细节信息可使接收显示装置能够执行适合于每个区域的频率特征的细节强化。梯度剖面信息可用于通过应用基于梯度的超分辨率在接收显示装置中来复原每个区域的原始边缘特征。纹理数据库索引可使接收显示装置能够选择性地参考预定义的纹理数据库，从而通过应用基于实例的超分辨率来促进每个区域的原始纹理的复原。
闪烁信息可使接收显示装置能够选择性地仅去除存在时域闪烁的区域。运动信息可提高在接收显示装置中的运动估计的准确性。深度信息可通过根据接收显示装置中的深度的自动对比度/细节增强来增强三维效果。
每个区域的边界信息可以与相应区域的边界处所发生的图像质量失真有关。每个区域的边界信息可包括以下信息中的至少之一：与相应区域的边界处产生的光晕尺寸有关的信息、与相应区域的边界处产生的轮廓尺寸有关的信息、以及与相应区域的边界处产生的振铃/蚊式伪像的尺寸有关的信息。
在这种情况下，每个区域的边界信息可以是用于根据区域边界处产生的伪像的类型和尺寸来柔性去除所述伪像的基础数据。
每个区域的意向信息可以与每个区域的原始图像的制作人期望的预定图像质量特征有关。例如，在图2中，当制作人将散焦效果和模糊效果插入到与关于草坪的对象对应的区域223中并将与关于人的对象对应的区域224处理成相对清晰时，接收显示装置并不能清楚地确定制作人的想法。因此，接收显示装置可能针对与关于草坪的对象对应的区域223和与关于人的对象对应的区域224两者均执行降低所有的噪声并增强细节的图像质量改进操作。所以，接收显示装置可能输出与制作人的意图不同的图像。
反映制作人意图的图像质量特征需要在未作改变的情况下被保持。因此，控制单元130可将反映制作人意图的图像质量特征设置成预定图像质量特征来进行保持。
具体地，每个区域的意向信息可包括以下信息中的至少之一：与每个区域的最优/最小/最大亮度值有关的信息、与每个区域的视觉显著性有关的信息、与每个区域的散焦水平有关的信息、以及与具体期望并插入到每个区域中的噪声类型和水平有关的信息以及与每个区域中具体期望的特定色调值有关的信息。
与每个区域的最佳/最小/最大亮度值有关的信息可用来避免过度增强。与每个区域的视觉显著性有关的信息可用来根据每个区域的视觉显著性来对每个区域应用不同的强调过程。与每个区域的散焦水平有关的信息可用来维持预定的散焦区域。以同样的方式，与具体期望并插入到每个区域中的噪声类型和水平有关的信息以及与每个区域中具体期望的特定色调值有关的信息可用来维持每个区域的期望色彩和噪声。
每个区域的语义信息可以为用于识别每个区域的信息且可表示与每个区域的识别含义有关的信息。如图2中，每个区域的语义信息可包括诸如天空、建筑物、草坪、大地和人的对象的对象识别值。
与每个区域的识别含义有关的信息可以为基础数据，该基础数据用于装置执行专用于被确定为具有特定含义的区域的操作。
每个区域的特征信息可包括作为必要因素的每个区域的划分信息并且可包括作为可选因素的每个区域的图像质量信息、每个区域的边界信息、每个区域的意图信息和每个区域的语义信息。
如上所述，控制单元130可控制通信单元110将获得的每个区域的特征信息与压缩图像一起传输至外部装置。
控制单元130可基于图像质量特征将压缩图像划分成与原始图像的划分出的区域对应的区域。随后，控制单元130可从压缩图像的划分出的相应区域获得压缩图像的每个区域的特征信息，并且可传输所获得的压缩图像的每个区域的特征信息。
具体地，控制单元130可以将从原始图像的相应区域获得的每个区域的特征信息、从压缩图像的相应区域获得的每个区域的特征信息以及压缩图像传输至外部装置。
举例来说，当接收显示装置具有与移动终端装置类似的具备小吞吐量的处理器或需要在无延迟的情况下快速执行操作时，接收显示装置可从内容提供装置预先获得压缩图像的每个区域的特征信息并将所获得的每个区域的特征信息传输至移动终端装置。因此，在没有基于原始图像每个区域的特征信息和压缩图像来获得压缩图像每个区域的特征并且基于所获得的压缩图像的每个区域的特征来执行图像质量改进操作的情况下，移动终端装置可基于接收到的压缩图像的每个区域的特征信息立即执行图像质量改进操作。
在这种情况下，控制单元130可从压缩图像的划分出的相应区域获得压缩图像的每个区域的特征信息。压缩图像的每个区域的特征信息可包括每个区域的划分信息，其中每个区域的划分信息包括以下中的至少之一：诸如相应区域中像素的颜色质心值和颜色差异值的统计特征值；诸如相应区域的边界坐标、中心坐标、最大区域坐标和最小区域坐标的几何特征值；以及诸如区域的消失、产生标记等基于时间的特征值。
压缩图像的每个区域的特征信息可包括每个区域的图像质量信息，其中每个区域的图像质量信息包含以下信息中至少之一：与每个区域的随机噪声水平以及块效应的产生位置和尺寸有关的噪声信息、与每个区域的分级频率大小和纹理有关的细节信息以及与每个区域的时域闪烁程度有关的闪烁信息。
压缩图像的每个区域的特征信息可包括每个区域的边界信息，其中每个区域的边界信息包含以下信息中至少之一：与相应区域的边界处产生的光晕尺寸有关的信息、与相应区域的边界处产生的轮廓尺寸有关的信息以及与相应区域的边界处产生的振铃/蚊式伪像的尺寸有关的信息。
另外，控制单元130可生成并且传输用于对压缩图像与每个区域的特征信息进行同步的同步信息。因此，接收显示装置可执行接收到的压缩图像与每个区域的特征信息的同步并且可基于每个区域的特征信息对压缩图像执行图像质量改进操作。
图4是示出根据本文中公开的实施方式的内容提供装置的详细结构的框图。
参照图4，内容提供装置100的控制单元130包括区域划分模块131、区域特征分析模块132和区域信息编码模块133。
在这种情况下，区域划分模块131可从原始图像的一个或多个划分出的区域获得每个区域的划分信息。获得的每个区域的划分信息可为用于接收显示装置的区域确定模块来确定相应像素属于哪个区域的基础信息。与区域确定模块有关的详细描述将在下文提供。
具体地，区域划分模块131可通过分析像素和图像的结构信息来执行构建概率模型的操作以及使用概率模型来将图像划分成一个或多个区域的操作，其中，所述概率模型用于通过分析图像的像素和结构信息来划分区域。
区域特征分析模块132可通过使用每个区域的划分信息来整合原始图像的每个区域的特征信息和每个区域的从外部源输入的意向信息。
区域信息编码模块133可通过整合从区域划分模块131获得的每个区域的划分信息和每个区域的其他特征信息(每个区域的图像质量信息、每个区域的边界信息和每个区域的意向信息以及每个区域的语义信息)来执行编码。
图5是为描述根据本文中公开的实施方式的内容提供装置的具体处理操作而提供的图示。
参照图5，响应于原始图像被输入到内容提供装置100，图像处理单元120可通过执行解码或缩放来生成压缩图像。控制单元130可执行区域划分建模520、确定每个像素的区域530和分析与原始图像有关的区域信息540的操作。
控制单元130可选择性地针对压缩图像执行分析畸变的区域信息的操作560。随后，控制单元130可通过整合经分析的原始图像的区域信息和针对压缩图像所分析的畸变的区域信息来执行编码550。
控制单元130可执行将与原始图像或压缩图像有关的区域信息与压缩图像进行整合的操作570。随后，控制单元130可将经整合的信息和图像通过单传输信道传输580或者将压缩图像和区域信息通过多个传输信道A和B分别传输590。在这种情况下，控制单元130可一起传输用于对压缩图像与区域信息进行同步的同步信息。
图6是示出根据本文中公开的实施方式的显示装置的结构的框图。
参照图6，显示装置600包括显示单元610、接收单元620和控制单元630。
显示单元610可显示图像。显示单元610可实现为液晶显示器(LCD)、有机发光二极管(OLED)显示器、等离子体显示面板(PDP)等。
接收单元620可接收原始图像的每个区域的特征信息和原始图像的压缩图像。
控制单元630可通过基于每个区域的特征信息将压缩图像的像素分组来将多个像素划分到一个或多个区域、可对相应的划分出的区域执行图像质量改进操作并且可控制显示单元610来显示经改进的图像。
在这种情况下，每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定原始图像的划分出的相应区域的划分信息、每个区域的与原始图像相应区域的图像质量特征有关的图像质量信息、每个区域的与在原始图像相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与原始图像相应区域的预定图像质量特征有关的意向信息以及每个区域的用来识别原始图像的相应区域的语义信息。
此外，控制单元630可基于每个区域的划分信息来确定压缩图像的相应像素属于哪个区域。控制单元630可基于每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一来对压缩图像的每个区域执行图像质量改进操作。下面将参照图7进一步详细描述控制单元630的结构。
图7是示出根据本文中公开的实施方式的控制单元630的详细结构的图示。
参照图7，控制单元630包括区域信息解码模块631、同步模块632、图像解码模块633、区域确定模块634和基于区域特征的处理模块635。
区域信息解码模块631可解码接收到的区域信息。图像解码模块633可解码接收到的图像。同步模块632可执行区域信息与图像帧的同步。
区域确定模块634可基于每个区域的划分信息来确定压缩图像的相应像素属于哪个区域。基于区域特征的处理模块635可基于包括在接收到的每个区域的特征信息中的每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一来执行图像质量改进操作。
例如，如图3所示，区域确定模块634可确定相应像素221-1、222-1、223-1、224-1、225-1属于多个区域221、222、223、224、225之中的哪个区域。基于区域特征的处理模块635可基于包括在接收到的每个区域的特征信息中的每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一对每个区域执行不同的图像质量改进操作。
图8是为描述根据本文中公开的实施方式的显示装置的处理操作而提供的图。
参照图8，显示装置600的接收单元620可接收图像和每个区域的特征信息。控制单元630可基于每个区域的特征信息中每个区域的划分信息来执行确定每个像素的区域的操作810，并且可基于包括在接收到的每个区域的特征信息中的每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一执行基于区域特征的图像处理820。此外，控制单元630可执行专用于每个设备的图像处理830且可生成最终输出图像。
根据本文中公开的实施方式的显示装置600的接收单元620可接收压缩图像的每个区域的特征信息。控制单元630可基于原始图像的每个区域的特征信息和压缩图像的每个区域的特征信息对压缩图像执行图像质量改进操作。
也就是说，如上所述，在显示装置实现为移动终端装置的情况下，响应于压缩图像的每个区域的特征信息被预先从内容提供装置100获得并且被传输至显示装置600，显示装置600的控制单元630可在没有基于原始图像的每个区域的特征信息和压缩图像获得压缩图像的每个区域的特征信息的情况下立即对压缩图像执行图像质量改进操作。
另外，接收单元620可接收用于对压缩图像与每个区域的特征信息进行同步的同步信息。控制单元630可基于同步信息执行压缩图像与每个区域的特征信息的同步，并且可基于每个区域的特征信息对压缩图像执行图像质量改进操作。
图9是示出根据本文中公开的实施方式用于图像质量改进操作的系统的结构的图示。
参照图9，用于图像质量改进操作的系统包括内容提供装置100和显示装置600。内容提供装置100可通过单信道或多信道与显示装置600连接。
上文中描述了内容提供装置100和显示装置600的具体结构，因此将省略重复的描述。
图10是为描述根据本文中公开的实施方式的在中间传输阶段中执行的操作而提供的图示。
具体地，响应于由第三服务提供者在中间传输阶段执行再传输，图像特征可能通过转码、缩放、网络均衡等被再次改变。
在这种情况下，可将从内容提供装置100中提取的畸变的区域信息更新成新信息。具体地，可以由第三服务提供者执行基于每个区域的划分信息来确定每个像素的区域1010、通过反映图像已改变的特征来更新畸变的区域信息1020、将更新的信息与图像整合1030以及通过信道来传输信息和图像1040的操作。
显示装置600可在中间传输阶段接收与图像已改变的特征有关的所有信息。因此，显示装置600可更准确地执行图像质量改进操作。
图11是为描述根据本文中公开的实施方式用于控制内容提供装置的方法而提供的流程图。
参照图11的方法，可通过对原始图像进行图像处理来生成压缩图像(S1110)。
可以基于图像质量特征将原始图像划分成一个或多个区域，并且可从相应区域获得每个区域的特征信息(S1120)。
在这种情况下，获得操作可包括通过像素划分原始图像并且基于相应像素的像素信息将像素分组到一个或多个区域中。
每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定划分出的相应区域的划分信息、每个区域的与相应区域的图像质量特征有关的图像质量信息、每个区域的与在相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与相应区域的预定图像质量特征有关的意向信息和每个区域的用来识别相应区域的语义信息。
每个区域的划分信息可包括与划分出的相应区域之中原始图像的相应像素所属的区域有关的信息。与原始图像的相应像素所属的区域有关的信息可包括与每个区域的特征参数有关的信息和与相应区域的像素坐标有关的信息中的至少之一。
可将所获得的每个区域的特征信息与压缩图像一起传输至外部装置(S1130)。
在这种情况下，获得操作可包括基于图像质量特征将压缩图像划分成与原始图像的划分出的区域对应的区域，并且从压缩图像的划分出的相应区域获得压缩图像的每个区域的特征信息。传输操作可包括传输获得的压缩图像的每个区域的特征信息。
根据本文中公开的实施方式的控制内容提供装置的方法还可包括生成并且传输用于对压缩图像与每个区域的特征信息进行同步的同步信息。
图12是为描述根据本文中公开的实施方式控制显示装置的方法而提供的流程图。
参照图12的方法，可接收原始图像的每个区域的特征信息和原始图像的压缩图像(S1210)。
随后，可通过基于每个区域的特征信息进行分组来将压缩图像的多个像素划分到一个或多个区域，并且可对相应的划分出的区域执行图像质量改进操作(S1220)。
在这种情况下，每个区域的特征信息可包括以下信息中的至少之一：每个区域的用来确定原始图像的划分出的相应区域的划分信息、每个区域的与原始图像的相应区域的图像质量特征有关的图像质量信息、每个区域的与在原始图像的相应区域的边界处发生的图像质量失真有关的边界信息、每个区域的与原始图像的相应区域的预定图像质量特征有关的意向信息以及每个区域的用来识别原始图像相应区域的语义信息。
执行图像质量改进操作可包括基于每个区域的划分信息确定压缩图像的相应像素属于哪个区域并且基于每个区域的图像质量信息、每个区域的边界信息、每个区域的意向信息和每个区域的语义信息中的至少之一对压缩图像的相应区域执行图像质量改进操作。
随后，可以显示经改进的图像(S1230)。
同时，可提供包括用于顺序执行本方法的程序的非暂时性计算机可读介质。
作为示例，可以提供包括用于执行以下操作的程序的非暂时性计算机可读介质，所述操作为：通过对原始图像进行图像处理来生成压缩图像、基于图像质量特征将原始图像划分成一个或多个区域以及从相应区域获得每个区域的特征信息。
作为另一示例，可提供包括用于执行以下操作的程序的非暂时性计算机可读介质，所述操作为：通过基于每个区域的特征信息来分组像素，从而将压缩图像的多个像素划分到一个或多个区域、对相应的划分出的区域执行图像质量改进操作和显示经改进的图像。
非暂时性计算机可读介质指代与短时间存储数据的寄存器、缓存或存储器不同的、永久性或半永久性存储数据的机器可读介质。具体地，上述各种应用和程序可以被存储在诸如光盘、数字多功能盘(DVD)、硬盘、蓝光光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等的非暂时性计算机可读介质中或者通过诸如光盘、数字多功能盘(DVD)、硬盘、蓝光光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等的非暂时性计算机可读介质来提供。
此外，以上示出内容提供装置和显示装置的框图不包括总线，但是内容提供装置和显示装置的部件的通信可通过总线来执行。此外，每个装置还可包括用于执行上述各种操作的处理器，例如，中央处理单元(CPU)、微处理器等。
如上文，已经示出并描述了一些实施方式。上述实施方式和优点仅是示例性的并且不被解释为限制本发明构思。本教导可容易地应用到其他类型的设备。此外，实施方式的说明书旨在是说明性的，并且不限制权利要求的范围，并且多种替代、修改和改变将对本领域普通技术人员显而易见。

Claims (7)

1.一种内容提供装置，包括：
通信单元；
图像处理单元；以及
控制单元，配置为：
控制所述图像处理单元通过对原始图像进行图像处理来获取压缩图像，
基于所述原始图像的图像质量特征将所述原始图像划分成多个第一区域，
获取所述多个第一区域中的每个区域的第一特征信息，
基于所述压缩图像的图像质量特征将所述压缩图像划分成与所述原始图像的所述多个第一区域对应的多个第二区域，
获取所述多个第二区域中的每个区域的第二特征信息，以及
控制所述通信单元将所述第一特征信息、所述第二特征信息和所述压缩图像传输至外部装置，以被所述外部装置在图像质量改进处理中使用，
其中，所述第一特征信息包括所述第一区域中的每个区域的划分信息、所述第一区域中的每个区域的图像质量信息、所述第一区域中的每个区域的边界信息以及所述第一区域中的每个区域的意向信息，
其中，所述第一区域中的每个区域的划分信息包括相应第一区域的颜色值和颜色变化，以及
其中，所述第一区域中的每个区域的意向信息包括相应第一区域的图像质量特征。
2.如权利要求1所述的内容提供装置，其中，所述控制单元生成并且传输用于对所述压缩图像与每个区域的第二特征信息进行同步的同步信息。
3.一种显示装置，包括：
显示单元；
接收单元，配置为接收原始图像的每个区域的第一特征信息、所述原始图像的压缩图像以及所述压缩图像的每个区域的第二特征信息；以及
控制单元，配置为：通过基于每个区域的第一特征信息和第二特征信息来分组所述压缩图像的多个像素，从而将所述多个像素划分到一个或多个区域；对所划分出的相应区域执行图像质量改进操作；以及控制所述显示单元显示所改进的图像，
其中，所述第一特征信息包括所述原始图像的每个区域的划分信息、所述原始图像的每个区域的图像质量信息、所述原始图像的每个区域的边界信息以及所述原始图像的每个区域的意向信息，
其中，所述原始图像的每个区域的划分信息包括相应区域的颜色值和颜色变化，
其中，所述原始图像的每个区域的意向信息包括相应区域的图像质量特征。
4.如权利要求3所述的显示装置，其中，所述接收单元进一步接收所述压缩图像的每个区域的第二特征信息，其中，所述控制单元基于所述原始图像的每个区域的第一特征信息和所述压缩图像的每个区域的第二特征信息对所述压缩图像执行所述图像质量改进操作。
5.如权利要求3所述的显示装置，其中，所述接收单元接收用于对所述压缩图像与每个区域的第二特征信息进行同步的同步信息，
其中，所述控制单元基于所述同步信息执行对所述压缩图像与每个区域的第二特征信息进行的同步，并且基于每个区域的第二特征信息对所述压缩图像执行所述图像质量改进操作。
6.一种控制内容提供装置的方法，所述方法包括：
通过对原始图像进行图像处理来获得压缩图像；
基于图像质量特征将所述原始图像划分成多个第一区域；
获得所述多个第一区域中的每个区域的第一特征信息；
基于所述压缩图像的图像质量特征将所述压缩图像划分成与所述原始图像的多个第一区域对应的多个第二区域；
获得所述多个第二区域中的每个区域的第二特征信息；
将所述第一特征信息、所述第二特征信息与所述压缩图像传输至外部装置，以被所述外部装置在图像质量改进处理中使用，
其中，所述第一特征信息包括所述第一区域中每个区域的划分信息、所述第一区域中每个区域的图像质量信息、所述第一区域中每个区域的边界信息以及所述第一区域中每个区域的意向信息，
其中，所述第一区域中每个区域的划分信息包括相应第一区域的颜色值和颜色变化，以及
其中，所述第一区域中的每个区域的意向信息包括相应第一区域的图像质量特征。
7.一种控制显示装置的方法，所述方法包括：
接收原始图像的每个区域的第一特征信息、所述原始图像的压缩图像和所述压缩图像的每个区域的第二特征信息；
通过基于所述原始图像的每个区域的第一特征信息和所述压缩图像的每个第二区域的第二特征信息来分组所述压缩图像的多个像素，从而将所述多个像素划分到一个或多个区域，以及对所划分出的相应区域执行图像质量改进操作；以及
显示所改进的图像，
其中，所述第一特征信息包括所述原始图像的每个区域的划分信息、所述原始图像的每个区域的图像质量信息、所述原始图像的每个区域的边界信息以及所述原始图像的每个区域的意向信息，
其中，所述原始图像的每个区域的划分信息包括相应区域的颜色值和颜色变化，以及
其中，所述原始图像的每个区域的意向信息包括相应区域的图像质量特征。
CN201580070269.XA 2014-12-23 2015-12-07 内容提供装置、显示装置及其控制方法 Active CN107113464B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020140187237A KR102091072B1 (ko) 2014-12-23 2014-12-23 컨텐츠 제공 장치, 디스플레이 장치 및 그 제어 방법
KR10-2014-0187237 2014-12-23
PCT/KR2015/013324 WO2016104990A1 (ko) 2014-12-23 2015-12-07 컨텐츠 제공 장치, 디스플레이 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
CN107113464A CN107113464A (zh) 2017-08-29
CN107113464B true CN107113464B (zh) 2021-03-02

Family

ID=56150959

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580070269.XA Active CN107113464B (zh) 2014-12-23 2015-12-07 内容提供装置、显示装置及其控制方法

Country Status (5)

Country Link
US (1) US10638131B2 (zh)
EP (1) EP3240291A4 (zh)
KR (1) KR102091072B1 (zh)
CN (1) CN107113464B (zh)
WO (1) WO2016104990A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108197567B (zh) * 2017-12-29 2021-08-24 百度在线网络技术（北京）有限公司 用于图像处理的方法、装置和计算机可读介质
CN113366527A (zh) * 2019-01-31 2021-09-07 三星电子株式会社 用于处理图像的电子装置和方法
US11032576B2 (en) 2019-06-10 2021-06-08 Microsoft Technology Licensing, Llc Selectively enhancing compressed digital content
CN111861908A (zh) * 2020-06-29 2020-10-30 维沃移动通信有限公司 图像处理方法及装置
CN112561890A (zh) * 2020-12-18 2021-03-26 深圳赛安特技术服务有限公司 图像清晰度的计算方法、装置和计算机设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050117798A1 (en) * 2003-12-02 2005-06-02 Eastman Kodak Company Method and apparatus for modifying a portion of an image frame in accordance with colorimetric parameters
JP2006279454A (ja) 2005-03-29 2006-10-12 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理プログラム、および記録媒体
KR20090107907A (ko) * 2008-04-10 2009-10-14 삼성전자주식회사 메타 데이터에 기초한 디지털 이미지 개선 방법 및 화상형성장치
DE112008003959T5 (de) * 2008-07-31 2011-06-01 Hewlett-Packard Development Co., L.P., Houston Wahrnehmungssegmentierung von Bildern
EP2187350A1 (en) 2008-11-05 2010-05-19 Thomson Licensing Method and device for assessing image quality degradation
EP2199981A1 (en) 2008-12-09 2010-06-23 Koninklijke Philips Electronics N.V. Image segmentation
EP2382791B1 (en) * 2009-01-27 2014-12-17 Telefonaktiebolaget L M Ericsson (PUBL) Depth and video co-processing
WO2011010834A2 (ko) * 2009-07-21 2011-01-27 삼성전자 주식회사 디스플레이 장치 및 그 디스플레이 방법
EP2543181B1 (en) 2010-03-03 2015-10-21 Koninklijke Philips N.V. Apparatuses and methods for defining color regimes
CN103918262B (zh) * 2011-06-14 2017-11-10 王舟 基于结构相似度的码率失真优化感知视频编码方法和系统
KR101285811B1 (ko) 2011-08-23 2013-07-12 광운대학교 산학협력단 홀로그래픽 영상의 공간 스케일러블 코딩 장치 및 방법
US20130170555A1 (en) 2011-12-28 2013-07-04 Broadcom Corporation Adapting transform coefficient scaling in video/image coding to block features identified in the transform domain
KR101914478B1 (ko) * 2012-01-10 2018-11-02 에스케이플래닛 주식회사 이미지 제공 시스템, 이를 위한 장치 및 이미지 제공 방법
WO2014007450A1 (ko) * 2012-07-06 2014-01-09 삼성전자주식회사 깊이 영상 처리 장치 및 방법
RU2652465C2 (ru) * 2012-07-13 2018-04-26 Конинклейке Филипс Н.В. Усовершенствованные способы и устройства для кодирования и декодирования hdr изображений
KR20140063125A (ko) 2012-11-16 2014-05-27 삼성전자주식회사 영역에 따라 다른 계수를 적용하여 화질을 개선하는 영상 처리 방법 및 그 장치
KR101347956B1 (ko) 2013-07-29 2014-01-10 주식회사 리버스톤미디어 초고화질 영상의 병렬처리에 의한 스트림 변환 및 복원 시스템 그리고 이를 이용한 초고화질 영상의 스트림 변환 및 복원 방법

Also Published As

Publication number Publication date
WO2016104990A1 (ko) 2016-06-30
EP3240291A4 (en) 2017-11-22
EP3240291A1 (en) 2017-11-01
KR102091072B1 (ko) 2020-03-19
US10638131B2 (en) 2020-04-28
US20170339408A1 (en) 2017-11-23
CN107113464A (zh) 2017-08-29
KR20160076769A (ko) 2016-07-01

Similar Documents

Publication Publication Date Title
CN107113464B (zh) 内容提供装置、显示装置及其控制方法
US9661296B2 (en) Image processing apparatus and method
EP3472801B1 (en) Image processing apparatus and recording medium
CN107801093B (zh) 视频渲染方法、装置、计算机设备和可读存储介质
JP2015156607A (ja) 画像処理装置、画像処理装置、及び電子機器
JP6015267B2 (ja) 画像処理装置、画像処理プログラム、これを記録したコンピュータ読み取り可能な記録媒体、および、画像処理方法
KR102661879B1 (ko) 영상 처리 장치 및 그 영상 처리 방법
US20150071532A1 (en) Image processing device, computer-readable recording medium, and image processing method
CN108806638B (zh) 一种图像的显示方法及其装置
CN114626967A (zh) 一种数字水印嵌入与提取方法、装置、设备及存储介质
CN104239883A (zh) 纹理特征提取方法及装置
CN104104843A (zh) 用于视频处理的有效的2d自适应噪声阈值
CN104657291A (zh) 车辆用头部单元及在车辆用头部单元的画面设定方法
US10096116B2 (en) Method and apparatus for segmentation of 3D image data
CN112700456A (zh) 图像区域对比度优化方法、装置、设备及存储介质
CN109685861B (zh) 图片压缩方法、装置、设备及计算机可读存储介质
US20220012849A1 (en) Image processing device and method
US20230066869A1 (en) Display device and operating method thereof
CN109391855B (zh) 显示亮度值的确定方法以及机顶盒
US20160203617A1 (en) Image generation device and display device
US8750648B2 (en) Image processing apparatus and method of processing image
CN113691835B (zh) 视频植入方法、装置、设备及计算机可读存储介质
CN110619362B (zh) 一种基于感知与像差的视频内容比对方法及装置
US9967546B2 (en) Method and apparatus for converting 2D-images and videos to 3D for consumer, commercial and professional applications
KR20140040497A (ko) 사용자 단말에서의 사용자 맞춤형 영상 처리장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant