KR102214439B1 - Image processing Method and apparatus for low-power mode - Google Patents

Image processing Method and apparatus for low-power mode Download PDF

Info

Publication number
KR102214439B1
KR102214439B1 KR1020160111072A KR20160111072A KR102214439B1 KR 102214439 B1 KR102214439 B1 KR 102214439B1 KR 1020160111072 A KR1020160111072 A KR 1020160111072A KR 20160111072 A KR20160111072 A KR 20160111072A KR 102214439 B1 KR102214439 B1 KR 102214439B1
Authority
KR
South Korea
Prior art keywords
pixel value
image data
output pixel
image
tone curve
Prior art date
Application number
KR1020160111072A
Other languages
Korean (ko)
Other versions
KR20170069134A (en
Inventor
박종필
안상준
이장원
최수렴
박찬민
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US15/364,979 priority Critical patent/US10114447B2/en
Publication of KR20170069134A publication Critical patent/KR20170069134A/en
Application granted granted Critical
Publication of KR102214439B1 publication Critical patent/KR102214439B1/en

Links

Images

Classifications

    • H04N5/3698—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/709—Circuitry for control of the power supply
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • H04N5/23241—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/63—Generation or supply of power specially adapted for television receivers

Abstract

개시된 일 실시 예에 따른 영상의 디스플레이를 위해 소모되는 전력을 감소시키기 위한 영상 처리 장치는, 디스플레이 될 영상 데이터를 입력 받는 입력부, 영상 데이터의 일부에 대한 명도(luminance), 해상도(resolution), 및 정밀도(precision) 중 적어도 하나를 조정하여 출력 픽셀 값을 획득하는 적어도 하나 이상의 프로세서, 및 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력하는 출력부를 포함하는 것을 특징으로 할 수 있다.An image processing apparatus for reducing power consumption for display of an image according to the disclosed embodiment includes an input unit receiving an input of image data to be displayed, luminance, resolution, and precision of a part of the image data. It may be characterized in that it comprises at least one processor that adjusts at least one of (precision) to obtain an output pixel value, and an output unit that outputs image data including the obtained output pixel value.

Description

저전력 모드를 위한 영상 처리 방법 및 장치 {Image processing Method and apparatus for low-power mode}Image processing method and apparatus for low-power mode

저전력 모드를 위한 영상처리 방법 및 장치에 관한 것으로, 구체적으로는 디스플레이 될 영상의 명도, 해상도 및 정밀도 중 적어도 하나를 감소시키고, 필터를 적용하여 저전력 모드에서 시인성 감소를 최소화시키는 영상 처리 방법 및 장치에 관한 것이다.It relates to an image processing method and apparatus for a low-power mode, and specifically, to an image processing method and apparatus for reducing at least one of brightness, resolution, and precision of an image to be displayed and applying a filter to minimize the decrease in visibility in a low-power mode. About.

스마트폰과 같은 모바일 기기의 기술 발달에 힘입어, 사용자는 모바일 기기를 통해 게임, 영화, 가상 현실(virtual reality) 영상 등과 같은 콘텐츠를 감상할 수 있다. With the development of technology in mobile devices such as smartphones, users can enjoy content such as games, movies, and virtual reality images through mobile devices.

모바일 기기의 저전력 모드는 게임 어플리케이션, 가상 현실 영상 또는 영화 재생을 위한 어플리케이션을 실행시키기 위해 사용되는 전력을 감소시킬 수 있는 모드를 말한다. 특히, 디스플레이를 위한 전력 소모가 전체 전력 소모에서 차지하는 비율이 높다는 점을 고려하여, 디스플레이에 사용되는 전력을 감소시키기 위한 저전력 모드에 대한 연구가 활발히 진행되고 있다.The low power mode of the mobile device refers to a mode capable of reducing power used to execute an application for playing a game application, a virtual reality image, or a movie. In particular, considering that power consumption for a display accounts for a high percentage of total power consumption, research on a low power mode for reducing power used for a display is actively being conducted.

영상의 디스플레이를 위해 소모되는 전력은 디스플레이하고자 하는 영상의 명도(즉, 밝기의 정도)에 따라 변경되므로, 영상의 명도를 감소시키거나 영상의 특정 컬러 성분을 감소시킴으로서 저전력 모드를 구현할 수 있다. 그러나, 영상의 명도를 일률적으로(uniformly) 줄이면 디스플레이하고자 하는 영상의 품질이 감소되거나, 영상 내에 존재하는 객체들 간 또는 객체와 배경 간의 경계 부분, 예를 들어 에지(Edge) 부분을 명확하게 파악하기 힘들어져 시인성(visibility)이 감소될 수 있다.Since the power consumed for the display of an image is changed according to the brightness (ie, the degree of brightness) of the image to be displayed, the low power mode can be implemented by reducing the brightness of the image or reducing a specific color component of the image. However, if the brightness of the image is uniformly reduced, the quality of the image to be displayed decreases, or the boundary between objects existing in the image or between the object and the background, for example, clearly grasps the edge. It becomes difficult and visibility may decrease.

시인성 감소를 최소화하면서, 영상의 디스플레이에 소모되는 전력을 감소시키는 영상 처리 장치 및 방법이 제공될 수 있다. An image processing apparatus and method may be provided for minimizing a decrease in visibility and reducing power consumed for displaying an image.

또한, 상기 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는데 있다. 본 실시 예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제로 한정되지 않으며, 이하의 실시 예들로부터 또 다른 기술적 과제들이 유추될 수 있다.Further, it is to provide a computer-readable recording medium in which a program for executing the method on a computer is recorded. The technical problem to be achieved by this embodiment is not limited to the technical problem as described above, and other technical problems may be inferred from the following embodiments.

일 실시 예에 따른 영상의 디스플레이를 위해 소모되는 전력을 감소시키기 위한 영상 처리 장치는, 디스플레이 될 영상 데이터를 입력 받는 입력부, 상기 영상 데이터의 일부에 대한 명도, 해상도, 및 정밀도 중 적어도 하나를 조정하여 출력 픽셀 값을 획득하는 적어도 하나 이상의 프로세서, 및 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력하는 출력부를 포함하는 것을 특징으로 할 수 있다.An image processing apparatus for reducing power consumption for display of an image according to an embodiment is provided by adjusting at least one of an input unit that receives image data to be displayed, and brightness, resolution, and precision of a portion of the image data. It may be characterized in that it comprises at least one processor that obtains an output pixel value, and an output unit that outputs image data including the obtained output pixel value.

상기 적어도 하나 이상의 프로세서는, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)를 조정하고, 상기 조정된 톤 커브에 기초하여, 상기 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대해, 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득하는 것을 특징으로 할 수 있다.The at least one processor may adjust a tone curve representing a correlation between an input pixel value and an output pixel value, and based on the adjusted tone curve, at least one of pixels included in the image data For the pixel, it may be characterized in that an output pixel value corresponding to an input pixel value is obtained.

상기 적어도 하나 이상의 프로세서는, 상기 톤 커브의 입력 픽셀 값의 전체 범위 중 일부의 범위를 선택하여, 상기 선택된 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값을 변경하고, 선택되지 않은 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값은 변경하지 않는 것을 특징으로 할 수 있다.The at least one processor may select a partial range of the entire range of input pixel values of the tone curve, change an output pixel value corresponding to an input pixel value within the selected range, and an input pixel value within an unselected range It may be characterized in that the output pixel value corresponding to is not changed.

상기 선택된 일부의 범위는, 소정의 기준 값 이상인 입력 픽셀 값들을 포함하는 것을 특징으로 할 수 있다.The selected partial range may include input pixel values equal to or greater than a predetermined reference value.

상기 적어도 하나 이상의 프로세서는, 상기 톤 커브를 비선형적(non-linear) 커브가 되도록 조정하는 것을 특징으로 할 수 있다.The at least one processor may be configured to adjust the tone curve to be a non-linear curve.

상기 적어도 하나 이상의 프로세서는, 상기 영상 데이터의 일부에 대한 렌더링 해상도 또는 텍스처 해상도를 감소시키는 것을 특징으로 할 수 있다.The at least one processor may reduce a rendering resolution or a texture resolution of a part of the image data.

상기 적어도 하나 이상의 프로세서는, 상기 영상 데이터의 일부에 존재하는 객체를 구성하는 버텍스(vertex)들의 개수를 감소시키는 것을 특징으로 할 수 있다.The at least one processor may be characterized by reducing the number of vertices constituting an object existing in a part of the image data.

상기 적어도 하나 이상의 프로세서는, 상기 영상 데이터 내에 존재하는 하나 이상의 객체의 경계선(edge)을 강화시키는 필터를 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터에 대해 적용하는 것을 특징으로 할 수 있다.The at least one processor may apply a filter for enhancing an edge of one or more objects existing in the image data to the image data including the obtained output pixel value.

일 실시 예에 따른, 영상의 디스플레이를 위해 소모되는 전력을 감소시키기 위한 영상 처리 방법에 있어서, 디스플레이 될 영상 데이터를 입력 받는 단계, 상기 영상 데이터의 일부에 대한 명도, 해상도, 및 정밀도 중 적어도 하나를 조정하여 출력 픽셀 값을 획득하는 단계, 및 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력하는 단계를 포함하는 것을 특징으로 할 수 있다.In an image processing method for reducing power consumption for display of an image, according to an embodiment, the step of receiving image data to be displayed, at least one of brightness, resolution, and precision of a portion of the image data It may be characterized in that it comprises adjusting to obtain an output pixel value, and outputting image data including the obtained output pixel value.

상기 출력 픽셀 값을 획득하는 단계는, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)를 조정하고, 상기 조정된 톤 커브에 기초하여, 상기 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대해, 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득하는 단계를 포함하는 것을 특징으로 할 수 있다.The obtaining of the output pixel value includes adjusting a tone curve representing a correlation between an input pixel value and an output pixel value, and, based on the adjusted tone curve, among pixels included in the image data. For at least one pixel, it may be characterized by including obtaining an output pixel value corresponding to an input pixel value.

상기 영상 데이터에 포함된 픽셀들 중 적어도 하나의 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득하는 단계는, 상기 톤 커브의 입력 픽셀 값의 전체 범위 중 일부의 범위를 선택하여, 상기 선택된 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값을 변경하고, 선택되지 않은 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값은 변경하지 않는 것을 특징으로 할 수 있다.The obtaining of an output pixel value corresponding to at least one input pixel value among pixels included in the image data includes selecting a partial range of the entire range of input pixel values of the tone curve, and inputting within the selected range. An output pixel value corresponding to a pixel value may be changed, and an output pixel value corresponding to an input pixel value within an unselected range may not be changed.

상기 선택된 일부의 범위는, 소정의 기준 값 이상인 입력 픽셀 값들을 포함하는 것을 특징으로 할 수 있다.The selected partial range may include input pixel values equal to or greater than a predetermined reference value.

상기 영상 데이터에 포함된 픽셀들 중 적어도 하나의 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득하는 단계는, 상기 톤 커브를 비선형적(non-linear) 커브가 되도록 조정하고, 상기 비선형적 톤 커브에 기초하여 출력 픽셀 값을 획득하는 것을 특징으로 할 수 있다.The step of obtaining an output pixel value corresponding to at least one input pixel value among pixels included in the image data includes adjusting the tone curve to be a non-linear curve, and adjusting the tone curve to a non-linear tone curve. It may be characterized in that the output pixel value is obtained based on it.

상기 출력 픽셀 값을 획득하는 단계는, 상기 영상 데이터의 일부에 대한 렌더링 해상도 또는 텍스처 해상도를 감소시키는 단계를 포함하는 것을 특징으로 할 수 있다.The obtaining of the output pixel value may include reducing a rendering resolution or a texture resolution for a portion of the image data.

상기 출력 픽셀 값을 획득하는 단계는, 상기 영상 데이터의 일부에 존재하는 객체를 구성하는 버텍스(vertex)들의 개수를 감소시키는 단계를 포함하는 것을 특징으로 할 수 있다.The obtaining of the output pixel value may include reducing the number of vertices constituting an object existing in a part of the image data.

상기 출력 픽셀 값을 획득하는 단계는, 상기 영상 데이터 내에 존재하는 하나 이상의 객체의 경계선(edge)을 강화시키는 필터를 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터에 대해 적용하는 단계를 더 포함하는 것을 특징으로 할 수 있다.The obtaining of the output pixel value further comprises applying a filter for enhancing an edge of one or more objects present in the image data to the image data including the obtained output pixel value. It can be characterized.

상기 영상 처리 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 제공될 수 있다.A computer-readable recording medium in which a program for executing the image processing method on a computer is recorded may be provided.

도1은 일 실시 예에 따른 멀티미디어 장치가 저전력 모드로 진입할 수 있는 환경을 나타낸다.
도2는 일 실시 예에 따른 영상 처리 장치의 블록도이다.
도3는 다양한 실시 예에 따른 톤 커브의 조정을 나타낸다.
도4는 일 실시 예에 따른 영상에 존재하는 객체에 대한 경계(edge)를 강화시키는 필터를 적용하기 전과 후를 나타낸다.
도5는 일 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.
도6는 구체적 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.
도7은 추가적 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.1 shows an environment in which a multimedia device according to an embodiment can enter a low power mode.
2 is a block diagram of an image processing apparatus according to an exemplary embodiment.
3 illustrates adjustment of a tone curve according to various embodiments.
4 illustrates before and after applying a filter for enhancing an edge of an object existing in an image according to an exemplary embodiment.
5 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to an exemplary embodiment.
6 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to a specific embodiment.
7 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to an exemplary embodiment.

이하에서는 첨부된 도면을 참고하여 본 발명의 바람직한 실시 예를 상세히 설명한다. 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 개시된 실시 예들은 당해 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서에서 사용되는 용어는 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 명세서에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 명세서 전반에 걸친 내용을 토대로 정의되어야 한다. 이하에서는 도면을 참조하여 실시 예들을 상세히 설명한다. 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 일 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Advantages and features, and a method of achieving them will become apparent with reference to the embodiments described later together with the accompanying drawings. However, it is not limited to the embodiments disclosed below, but may be implemented in various different forms, and the disclosed embodiments are provided to completely inform the scope of the invention to those of ordinary skill in the art. , The invention is only defined by the scope of the claims. As for terms used in the specification, general terms that are currently widely used as possible are selected while considering functions, but this may vary according to the intention or precedent of a technician working in the field, the emergence of new technologies, and the like. In addition, in certain cases, there are terms arbitrarily selected by the applicant, and in this case, the meaning of the terms will be described in detail in the description of the corresponding invention. Therefore, terms used in the specification should be defined based on the meaning of the term and the contents throughout the specification, not just the name of the term. Hereinafter, exemplary embodiments will be described in detail with reference to the drawings. Since the embodiments described in the present specification and the configurations shown in the drawings are only an example, and do not represent all the technical ideas of the present invention, various equivalents and modifications that can replace them at the time of application It should be understood that there may be.

또한, 명세서에서 사용되는 "부" 또는 "모듈"이라는 용어는 FPGA 또는 ASIC과 같은 하드웨어 구성요소 또는 회로를 의미할 수 있다.In addition, the terms "unit" or "module" used in the specification may mean a hardware component or circuit such as an FPGA or ASIC.

도1은 일 실시 예에 따른 멀티미디어 장치가 저전력 모드로 진입하는 환경을 나타낸다.1 illustrates an environment in which a multimedia device enters a low power mode according to an embodiment.

멀티미디어 장치(100)는 게임, 영화, 가상 현실 영상, 입체 영상과 같은 영상 컨텐츠를 디스플레이하는 장치일 수 있다. 예를 들어, 멀티미디어 장치(100)는 텔레비전, 게임기, 컴퓨터, 및 스마트 폰과 같은 모바일 기기 중 어느 하나일 수 있으나 이에 제한되지 않는다. 예를 들어, 사용자는 멀티미디어 장치(100) 내에 저장된 게임 어플리케이션을 실행시키고, 멀티미디어 장치(100)의 화면을 통해 게임 영상을 감상할 수 있다. The multimedia device 100 may be a device that displays image content such as a game, a movie, a virtual reality image, or a stereoscopic image. For example, the multimedia device 100 may be any one of a television, a game machine, a computer, and a mobile device such as a smart phone, but is not limited thereto. For example, the user may execute a game application stored in the multimedia device 100 and view a game image through the screen of the multimedia device 100.

일 실시 예에 따른 멀티미디어 장치(100)는 영상을 화면에 최종적으로 디스플레이 하기 위해, 렌더링을 수행할 수 있다. 렌더링의 한 종류인3D 렌더링(3-Dimensional Rendering)은 3차원 모델 데이터를 주어진 카메라 시점(view point)에서 보이는 영상으로 합성(synthesis)할 수 있다. 일 실시 예에 따른 멀티미디어 장치(100)는 3차원 모델을 화면에 투영(projection)하면서 영상을 생성하는 래스터화(rasterization) 방법과 카메라 시점에서 영상의 각 픽셀을 향한 광선을 따라 입사하는 빛의 경로를 추적하여 영상을 생성하는 레이 트레이싱(ray tracing) 방법 등을 사용하여 최종적으로 화면에 디스플레이되는 영상 데이터를 획득할 수 있다. The multimedia apparatus 100 according to an embodiment may perform rendering in order to finally display an image on a screen. 3-Dimensional Rendering, which is a type of rendering, may synthesize 3D model data into an image viewed from a given camera view point. The multimedia apparatus 100 according to an embodiment includes a rasterization method of generating an image while projecting a 3D model onto a screen, and a path of light incident along a ray from a camera viewpoint toward each pixel of an image. Image data that is finally displayed on the screen may be obtained by using a ray tracing method or the like that generates an image by tracking the image.

멀티미디어 장치(100)는 배터리로부터 공급받은 전력을 사용하여, 영상 데이터에 대해 렌더링을 수행하여 화면에 최종적으로 디스플레이되는 영상 데이터를 획득할 수 있다. 멀티미디어 장치(100)는, 전체 전력 소모에서 영상의 디스플레이를 위한 전력소모가 차지하는 비율이 매우 높다는 점을 고려하여, 디스플레이 될 영상을 제어하는 저전력 모드를 사용할 수 있다.The multimedia apparatus 100 may obtain image data finally displayed on a screen by performing rendering on the image data using power supplied from the battery. The multimedia apparatus 100 may use a low-power mode for controlling an image to be displayed in consideration of a very high ratio of power consumption for displaying an image to the total power consumption.

일 실시 예에 따른 멀티미디어 장치(100)는, 멀티미디어 장치(100) 내의 배터리의 잔량이 일정 수준보다 아래이면, 저전력 모드로 진입할 것인지를 물어보는 사용자 인터페이스를 화면에 표시할 수 있다. 일 실시 예에 따른 멀티미디어 장치(100)는, 사용자가 멀티미디어 장치(100)의 환경 설정 메뉴에서 저전력 모드로 변경한 경우에 저전력 모드로 진입할 수 있다. 일 실시 예에 따른 멀티미디어 장치(100)는, 배터리 잔량이 소정의 수준보다 낮거나, 배터리 소모가 큰 특정 어플리케이션을 동작시키는 경우에 저전력 모드로 자동적으로 진입할 수도 있다.The multimedia device 100 according to an exemplary embodiment may display a user interface asking whether to enter the low power mode on the screen when the remaining amount of the battery in the multimedia device 100 is below a predetermined level. The multimedia device 100 according to an embodiment may enter the low power mode when the user changes to the low power mode in the environment setting menu of the multimedia device 100. The multimedia device 100 according to an exemplary embodiment may automatically enter a low power mode when a battery remaining level is lower than a predetermined level or a specific application with high battery consumption is operated.

멀티미디어 장치(100)는 저전력 모드에 진입하면, 디스플레이되는 영상의 명도를 감소시킬 수 있다. 예를 들어, 멀티미디어 장치(100)는 디스플레이되는 영상의 픽셀 값을 감소시킬 수 있다. 픽셀 값(pixel value)이란, 픽셀의 휘도 값(luminance value)를 의미할 수 있다. 예를 들어, 영상의 색 공간이 YCbCr(Y : 휘도 성분, Cb와 Cr : 색차 성분)인 경우, 픽셀 값은 Y성분의 값을 나타낼 수 있으며, 색 공간이 RGB(R : 적, G : 녹, B : 청)인 경우, 픽셀 값은 R 성분과 G성분과 B성분의 값을 합하여 3으로 나눈 값을 의미할 수 있다. 일 실시 예에 따라 픽셀 값을 8비트로 표현하는 경우, 픽셀 값은 0부터 255까지의 값을 가지는 그레이 스케일(gray scale) 값으로 표현될 수 있다. When the multimedia device 100 enters the low power mode, the brightness of the displayed image may be reduced. For example, the multimedia device 100 may reduce a pixel value of a displayed image. The pixel value may mean a luminance value of a pixel. For example, if the color space of an image is YCbCr (Y: luminance component, Cb and Cr: color difference component), the pixel value can represent the value of the Y component, and the color space is RGB (R: red, G: green). , B: blue), the pixel value may mean a value obtained by dividing the values of the R component, G component, and B component by 3. According to an embodiment, when a pixel value is expressed in 8 bits, the pixel value may be expressed as a gray scale value having a value from 0 to 255.

이하, 픽셀 값을 증가시킨다는 것은 픽셀의 명도가 밝아진다는 것을, 픽셀 값을 감소시킨다는 것은 픽셀의 명도가 어두워진다는 것을 의미할 수 있다. 이하, 픽셀 값의 범위는, 픽셀이 표현할 수 있는 명도 범위(luminance range 또는 brightness range)를 의미할 수 있다.Hereinafter, increasing the pixel value may mean that the brightness of the pixel becomes brighter, and decreasing the pixel value may mean that the brightness of the pixel becomes dark. Hereinafter, the range of the pixel value may mean a luminance range or brightness range that can be expressed by the pixel.

도2는 일 실시 예에 따른 영상 처리 장치의 블록도이다. 2 is a block diagram of an image processing apparatus according to an exemplary embodiment.

영상 처리 장치(200)는 멀티미디어 장치(100)의 저전력 모드를 위한 장치로서, 멀티미디어 장치(100)의 내부 또는 외부에 위치할 수 있다.The image processing device 200 is a device for a low power mode of the multimedia device 100 and may be located inside or outside the multimedia device 100.

영상 처리 장치(200)는 입력부(210), 프로세서(220), 및 출력부(230)을 포함할 수 있다.The image processing apparatus 200 may include an input unit 210, a processor 220, and an output unit 230.

입력부(210)는 디스플레이 될 영상 데이터를 입력 받을 수 있다. 영상 데이터는 복수의 픽셀 값을 포함할 수 있다. 일 실시 예에 따른 입력부(210)는 현재 디스플레이 될 영상 프레임(image frame)을 구성하는 픽셀들에 대한 입력 픽셀 값들을 버퍼(buffer)에 저장할 수 있다. 일 실시 예에 따른 영상 데이터는 입력 픽셀 값 외에, 영상의 객체를 구성하는 버텍스(vertex)의 좌표 및 개수, 텍스처(texture) 데이터, 속성(properties), 기하학적 정보 중 적어도 하나를 포함할 수 있다.The input unit 210 may receive image data to be displayed. The image data may include a plurality of pixel values. The input unit 210 according to an embodiment may store input pixel values for pixels constituting an image frame to be displayed currently in a buffer. Image data according to an embodiment may include at least one of coordinates and number of vertices constituting an object of an image, texture data, properties, and geometric information in addition to input pixel values.

프로세서(220)는 디스플레이 될 영상의 전체 또는 일부에 대해 명도(luminance), 해상도(resolution) 및 정밀도(precision) 중 적어도 하나를 조정할 수 있다. 일 실시 예에 따른 프로세서(220)는 ASIC(application specific integrated circuit), 임베디드 프로세서, 마이크로 프로세서, 하드웨어 제어 로직, 하드웨어 유한 상태 기계(FSM), 디지털 신호 프로세서(DSP) 또는 이들의 조합일 수 있다. 일 실시 예에서는 프로세서(220)는 적어도 하나 이상의 프로세서(도시되지 않음)를 포함할 수 있다.The processor 220 may adjust at least one of luminance, resolution, and precision for all or part of an image to be displayed. The processor 220 according to an embodiment may be an application specific integrated circuit (ASIC), an embedded processor, a microprocessor, a hardware control logic, a hardware finite state machine (FSM), a digital signal processor (DSP), or a combination thereof. In an embodiment, the processor 220 may include at least one processor (not shown).

명도, 해상도 및 정밀도가 조정되는 영역은 영상의 특정한 공간적(spatial) 영역 또는 소정의 조건을 만족하는 픽셀들의 집합일 수 있다. 일 실시 예에 따른 프로세서(220)는 명도, 해상도 및 정밀도 중 어느 하나만을 조정할 수 있다. 다른 실시 예에 따른 프로세서(220)는 명도, 해상도 및 정밀도 중 적어도 두 가지를 조정할 수 있다. 프로세서(220)가 명도, 해상도 및 정밀도 중 적어도 두 가지를 조정하는 경우, 조정하는 영역을 독립적으로 결정할 수 있다. 예를 들어, 프로세서(220)는 소정의 기준 값 이상의 명도를 가지는 입력 픽셀 값을 가지는 픽셀들에 대해 명도를 조정하고, 조정된 픽셀들과는 별도의 영상 내의 공간적 영역을 선택하고 선택된 영역에 대해 해상도를 조정할 수 있다.An area in which brightness, resolution, and precision are adjusted may be a specific spatial area of an image or a set of pixels satisfying a predetermined condition. The processor 220 according to an embodiment may adjust only one of brightness, resolution, and precision. The processor 220 according to another embodiment may adjust at least two of brightness, resolution, and precision. When the processor 220 adjusts at least two of brightness, resolution, and precision, the region to be adjusted may be independently determined. For example, the processor 220 adjusts the brightness of pixels having input pixel values having a brightness of more than a predetermined reference value, selects a spatial area in the image separate from the adjusted pixels, and selects a resolution for the selected area. Can be adjusted.

일 실시 예에 따른 프로세서(220)는 디스플레이 될 영상의 명도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)를 조정하고, 조정된 톤 커브에 기초하여 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대해, 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득할 수 있다. 획득된 출력 픽셀 값은, 출력 픽셀 값과 대응하는 입력 픽셀 값과 다른 값을 가질 수 있다. 일 실시 예에 따른 톤 커브를 조정한다는 것은 기 저장된 톤 커브를 변형하고 변형된 톤 커브를 출력 픽셀 값을 획득하기 위한 적어도 하나의 톤 커브로 결정한다는 의미를 포함할 수 있다. 일 실시 예에 따른 톤 커브를 조정한다는 것은 기 저장된 톤 커브가 없으면 새로운 톤 커브를 생성하고, 생성된 톤 커브를 출력 픽셀 값을 획득하기 위한 적어도 하나의 톤 커브로 결정한다는 의미를 포함할 수 있다.The processor 220 according to an embodiment may reduce the brightness of an image to be displayed. The processor 220 according to an embodiment adjusts a tone curve representing a correlation between an input pixel value and an output pixel value, and based on the adjusted tone curve, at least one of pixels included in the image data For a pixel, an output pixel value corresponding to an input pixel value may be obtained. The obtained output pixel value may have a value different from the input pixel value corresponding to the output pixel value. Adjusting the tone curve according to an embodiment may include deforming a previously stored tone curve and determining the transformed tone curve as at least one tone curve for obtaining an output pixel value. Adjusting the tone curve according to the embodiment may include creating a new tone curve if there is no pre-stored tone curve, and determining the generated tone curve as at least one tone curve for obtaining an output pixel value. .

이하, 톤 커브의 출력 픽셀 값을 변경한다는 것은, 입력 픽셀 값(A)과 입력 픽셀 값(A)과 대응되는 출력 픽셀 값(A')을 서로 다른 값을 가지도록 기 저장된 톤 커브의 형태를 조정하는 것을 의미할 수 있다. 일 실시 예에 따른 기 저장된 톤 커브는 후술할 도3의 톤 커브(310)의 형태일 수 있다. 예를 들어, 조정된 톤 커브의 출력 픽셀 값 중 적어도 하나의 출력 픽셀 값은, 대응하는 입력 픽셀 값보다 작거나 큰 값을 가질 수 있다.Hereinafter, changing the output pixel value of the tone curve means that the input pixel value (A) and the input pixel value (A) and the corresponding output pixel value (A') have different values. It can mean adjusting. The pre-stored tone curve according to an embodiment may be in the shape of the tone curve 310 of FIG. 3 to be described later. For example, at least one output pixel value among the output pixel values of the adjusted tone curve may have a value smaller or larger than a corresponding input pixel value.

일 실시 예에 따른 프로세서(220)는 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)의 입력 픽셀 값 중 일부를 선택하여 선택된 입력 픽셀 값에 대응하는 출력 픽셀 값을 입력 픽셀 값보다 크거나 작은 픽셀 값을 가지도록 톤 커브를 조정할 수 있다. The processor 220 according to an embodiment selects some of the input pixel values of a tone curve representing the correlation between the input pixel value and the output pixel value, and inputs an output pixel value corresponding to the selected input pixel value. You can adjust the tone curve to have pixel values greater or less than the value.

일 실시 예에 따른 프로세서(220)는 톤 커브의 입력 픽셀 값의 전체 범위 중 일부의 범위를 선택하여, 선택된 범위에 포함되는 입력 픽셀 값에 대응하는 출력 픽셀 값을 변경하고, 선택되지 않은 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값은 변경하지 않을 수 있다. 선택된 일부의 범위는, 소정의 기준 값 이상인 입력 픽셀 값들을 포함할 수 있다.The processor 220 according to an embodiment selects a partial range of the entire range of input pixel values of the tone curve, changes the output pixel value corresponding to the input pixel value included in the selected range, and The output pixel value corresponding to the input pixel value may not be changed. The selected partial range may include input pixel values greater than or equal to a predetermined reference value.

도3을 참조하여 설명하면, 도3은 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 다양한 실시 예의 톤 커브(310, 320, 330, 340)를 나타낸다.Referring to FIG. 3, FIG. 3 shows tone curves 310, 320, 330, and 340 of various embodiments showing a correlation between input pixel values and output pixel values.

톤 커브(310)은 모든 입력 픽셀 값에 대해, 입력 픽셀 값과 입력 픽셀 값에 대응하는 출력 픽셀 값이 동일함을 나타내는 그래프이다. 예를 들어, 픽셀 값을 8비트로 표현하는 경우, 입력 픽셀 값이 220이면 입력 픽셀 값에 대응하는 출력 픽셀 값 역시 220이다. 예를 들어, 프로세서(220)는 톤 커브(310)에 기초하여, 입력 픽셀 값과 동일한 값을 가지는 출력 픽셀 값을 획득할 수 있다. 일 실시 예에 따른 프로세서(220)가 톤 커브(310)에 기초하여 출력 픽셀 값을 획득하는 경우, 디스플레이 되는 영상의 명도는 변하지 않는다.The tone curve 310 is a graph indicating that for all input pixel values, the input pixel value and the output pixel value corresponding to the input pixel value are the same. For example, when a pixel value is expressed in 8 bits, if the input pixel value is 220, the output pixel value corresponding to the input pixel value is also 220. For example, the processor 220 may obtain an output pixel value having the same value as the input pixel value based on the tone curve 310. When the processor 220 according to an embodiment acquires an output pixel value based on the tone curve 310, the brightness of the displayed image does not change.

톤 커브(320)는, 톤 커브(310)를 Y 축 방향으로 이동시켜 조정한 것이다. 톤 커브(320)는 출력 픽셀 값(A')은 출력 픽셀 값(A')에 대응하는 입력 픽셀 값(A)보다 작은 값을 가짐을 나타낸다. 예를 들어, 톤 커브(320)가 톤 커브(310)를 Y 축 방향으로 K 만큼 아래로 이동한 그래프라면, 출력 픽셀 값은 출력 픽셀 값과 대응하는 입력 픽셀 값보다 K 만큼 작은 값을 가질 수 있다. 예를 들어, 입력 픽셀 값이 220인 경우, 입력 픽셀 값과 대응하는 출력 픽셀 값은 220 - K 의 값을 가질 수 있다. 즉, 일 실시 예에 따른 프로세서(220)는, 톤 커브(320)에 기초하여, 입력 픽셀 값의 전체 범위에 대해, 입력 픽셀 값보다 작은 값을 가지는 출력 픽셀 값을 획득할 수 있다. 일 실시 예에 따른 프로세서(220)는, 톤 커브(320)에 기초하여 출력 픽셀 값을 획득하는 경우, 영상의 전체 명도를 어둡게 하여 출력할 수 있다. The tone curve 320 is adjusted by moving the tone curve 310 in the Y-axis direction. The tone curve 320 indicates that the output pixel value A'has a value smaller than the input pixel value A corresponding to the output pixel value A'. For example, if the tone curve 320 is a graph in which the tone curve 310 is moved down by K in the Y-axis direction, the output pixel value may have a value that is smaller by K than the output pixel value and the corresponding input pixel value. have. For example, when the input pixel value is 220, the output pixel value corresponding to the input pixel value may have a value of 220 -K. That is, the processor 220 according to an embodiment may obtain an output pixel value having a value smaller than the input pixel value for the entire range of the input pixel value based on the tone curve 320. When obtaining an output pixel value based on the tone curve 320, the processor 220 according to an embodiment may darken the overall brightness of the image and output it.

톤 커브(330)는 입력 픽셀 값의 범위 중에서 선택된 일부의 범위에 한해 출력 픽셀 값이 변경됨을 나타낸다. 톤 커브(330)는 소정의 기준 값(335)보다 큰 값을 가지는 입력 픽셀 값의 범위(337)에 대응하는 출력 픽셀 값을 대응하는 입력 픽셀 값보다 작은 값을 가지도록 조정된 톤커브이다. 따라서, 톤 커브(330)에 기초하여 획득된 출력 픽셀 값은 대응하는 입력 픽셀 값보다 작은 값을 가지는 출력 픽셀 값을 포함할 수 있다. 일 실시 예에 따른 프로세서(220)는 톤 커브(330)에 기초하여 영상의 일부 명도 범위에 해당되는 부분에 한해 어둡게 하여 출력할 수 있다.The tone curve 330 indicates that the output pixel value is changed only in a selected partial range of the input pixel value range. The tone curve 330 is a tone curve adjusted to have an output pixel value corresponding to a range 337 of input pixel values having a value greater than a predetermined reference value 335 to have a value smaller than a corresponding input pixel value. Accordingly, the output pixel value obtained based on the tone curve 330 may include an output pixel value having a value smaller than a corresponding input pixel value. The processor 220 according to an embodiment may darken and output only a portion corresponding to a partial brightness range of the image based on the tone curve 330.

사용자는 영상의 낮은 명도의 픽셀 값이 감소하는 것에 비해, 높은 명도 의 픽셀 값이 감소할 때 시인성 감소를 더 적게 느끼므로, 일 실시 예에 따른 프로세서(220)는 입력 픽셀 값의 전체 범위에 대한 출력 픽셀 값을 일률적으로(uniformly) 낮추는 톤 커브(320) 대신, 일부의 명도 범위에 포함된 입력 픽셀 값에 대응하는 출력 픽셀 값만을 변경하는 톤 커브(330)에 기초하여 시인성 감소를 최소화할 수 있다. Since the user feels less visibility when the pixel value of high brightness decreases compared to the decrease of the pixel value of low brightness of the image, the processor 220 according to an embodiment Instead of the tone curve 320 that uniformly lowers the output pixel value, the reduction in visibility can be minimized based on the tone curve 330 that changes only the output pixel value corresponding to the input pixel value included in some brightness ranges. have.

톤 커브(340)는 비선형적(non-linear) 커브 형태의 톤커브이다. 톤 커브(340)는 'S'자 곡선의 형태를 나타낸다. 톤 커브(340)는 소정의 기준 값(345)보다 큰 값을 가지는 입력 픽셀 값의 범위(347)에 대응하는 출력 픽셀 값을 대응하는 입력 픽셀 값보다 작은 값을 가지도록 한다. 또한, 톤 커브(340)는 소정의 기준 값(345)보다 작은 값을 가지는 입력 픽셀 값의 범위(343)에 대응하는 출력 픽셀 값을 대응하는 입력 픽셀 값보다 큰 값을 가지도록 할 수 있다. The tone curve 340 is a tone curve in the form of a non-linear curve. The tone curve 340 represents the shape of an'S' curve. The tone curve 340 makes an output pixel value corresponding to the input pixel value range 347 having a value greater than a predetermined reference value 345 to have a value smaller than a corresponding input pixel value. In addition, the tone curve 340 may make an output pixel value corresponding to the input pixel value range 343 having a value smaller than a predetermined reference value 345 have a value larger than a corresponding input pixel value.

예를 들어, 일 실시 예에 따른 프로세서(220)는 톤 커브(340)에 기초하여, 영상의 낮은 명도 범위의 픽셀 값은 출력 픽셀 값을 증가시킴으로서 더 밝게 출력하고, 높은 명도 범위의 픽셀 값은 출력 픽셀 값을 감소시킴으로서 더 어둡게 출력할 수 있다. 일 실시 예에 따른 프로세서(220)는 톤 커브(340) 외에 다른 어떠한 형태의 비선형적 커브인 톤 커브에 기초하여 출력 픽셀 값을 획득할 수 있음은 물론이다.For example, based on the tone curve 340, the processor 220 according to an embodiment outputs a pixel value in a low brightness range of an image brighter by increasing an output pixel value, and the pixel value in a high brightness range is By reducing the output pixel value, it is possible to output darker. It goes without saying that the processor 220 according to an exemplary embodiment may obtain an output pixel value based on a tone curve that is a nonlinear curve of any shape other than the tone curve 340.

일 실시 예에 따른 프로세서(220)는 기 저장된 복수의 톤 커브 중에서 출력 픽셀 값을 획득하기 위한 톤 커브를 선택할 수 있다. 일 실시 예에 따른 프로세서(220)는 현재 실행 중인 어플리케이션의 종류 또는 디스플레이 되는 영상 데이터의 종류에 따라, 기 저장된 복수의 톤 커브들 중에서 출력 픽셀 값을 획득하기 위한 톤 커브를 다르게 선택할 수 있다.The processor 220 according to an embodiment may select a tone curve for obtaining an output pixel value from among a plurality of pre-stored tone curves. According to an exemplary embodiment, the processor 220 may differently select a tone curve for obtaining an output pixel value from among a plurality of pre-stored tone curves according to a type of an application currently being executed or a type of image data to be displayed.

다시 도2를 참조하여 설명하면, 프로세서(220)는 조정된 톤 커브에 기초하여, 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대한 출력 픽셀 값을 획득할 수 있다.Referring again to FIG. 2, the processor 220 may obtain an output pixel value for at least one pixel among pixels included in the image data based on the adjusted tone curve.

일 실시 예에 따른 프로세서(220)는 디스플레이 될 영상의 해상도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 디스플레이 될 영상의 일부 영역에 대한 해상도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 사용자 비주시 영역(Non-gazing region)을 결정하고, 결정된 영역에 대한 해상도를 감소시킬 수 있다.The processor 220 according to an embodiment may reduce the resolution of an image to be displayed. The processor 220 according to an embodiment may reduce the resolution of a partial area of an image to be displayed. The processor 220 according to an exemplary embodiment may determine a non-gazing region and may reduce a resolution for the determined region.

주시 영역은 눈이 응시(gaze)하는 지점을 포함하는 영역이고, 비주시 영역은 주시 영역 이외의 영역이다. 구체적으로, 주시 영역은 사람의 눈에 의해 초점이 맺히는 지점을 포함하는 영역이다. 비주시 영역은 실제 눈으로 이미지의 빛은 들어오나, 초점이 형성되는 영역에서 벗어나 있어 지각하지 못하는 영역이다. 일 실시 예에 따른 프로세서(220)는 움직임이 적은 영역을 비주시 영역으로 선택하고 선택된 영역의 해상도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 밝은 명도 범위를 가지는 블록을 선택하고 선택된 블록의 해상도를 감소시킬 수 있다.The gaze area is an area that includes a point where the eye gazes, and the non-view area is an area other than the gaze area. Specifically, the gaze area is an area including a point at which focus is focused by the human eye. The non-observable area is the area where the light of the image comes in to the real eye, but is out of the area where the focus is formed, so that it cannot be perceived. According to an embodiment, the processor 220 may select an area with less motion as a non-view area and reduce the resolution of the selected area. The processor 220 according to an embodiment may select a block having a bright brightness range and may reduce the resolution of the selected block.

일 실시 예에 따른 프로세서(220)는 선택된 영역에 대해 렌더링 해상도를 감소거나 텍스처 해상도를 감소시키고, 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대한 출력 픽셀 값을 획득할 수 있다.The processor 220 according to an embodiment may reduce the rendering resolution or texture resolution of the selected area, and obtain an output pixel value for at least one pixel among pixels included in the image data.

일 실시 예에 따른 프로세서(220)는 디스플레이 될 영상의 정밀도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 영상 일부 영역에 대한 정밀도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 움직임이 적은 영역을 비주시 영역으로 선택하고 선택된 영역의 정밀도를 감소시킬 수 있다. 일 실시 예에 따른 프로세서(220)는 밝은 명도 범위를 가지는 블록을 선택하고 선택된 블록의 정밀도를 감소시킬 수 있다.The processor 220 according to an embodiment may reduce the precision of an image to be displayed. The processor 220 according to an embodiment may reduce the precision of a partial area of an image. The processor 220 according to an embodiment may select a region with little motion as a non-view region and reduce the precision of the selected region. The processor 220 according to an embodiment may select a block having a bright brightness range and may reduce the precision of the selected block.

일 실시 예에 따른 프로세서(220)는 정밀도를 감소시키기 위한 영역이 선택되면, 선택된 영역에 존재하는 객체에 대해, 객체를 구성하는 버텍스(vertex)들의 개수를 소정의 개수 이하로 감소시키고, 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대한 출력 픽셀 값을 획득할 수 있다. When a region for reducing precision is selected, the processor 220 according to an embodiment reduces the number of vertices constituting the object to a predetermined number or less for an object existing in the selected region, and An output pixel value for at least one of the pixels included in may be obtained.

명도, 해상도, 및 정밀도 중 적어도 하나가 감소되어 획득된 출력 픽셀 값을 포함하는 영상 데이터는 시인성 감소를 최소화하기 위해 추가적인 영상 처리 알고리즘이 적용될 수 있다. 이는 도4를 참조하여 후술한다.Image data including output pixel values obtained by decreasing at least one of brightness, resolution, and precision may be applied with an additional image processing algorithm to minimize a decrease in visibility. This will be described later with reference to FIG. 4.

출력부(230)는 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력할 수 있다. 일 실시 예에 따른 출력 픽셀 값을 포함하는 영상 데이터는 버퍼에 저장되고, 버퍼에 저장된 영상 데이터는 멀티미디어 장치(100)의 화면에 최종적으로 디스플레이 될 수 있다.The output unit 230 may output image data including the obtained output pixel value. Image data including output pixel values according to an exemplary embodiment may be stored in a buffer, and image data stored in the buffer may be finally displayed on the screen of the multimedia apparatus 100.

일 실시 예에 따라, 영상 처리 장치(200)는 입력부(210), 프로세서(220) 및 출력부(230)를 포함하는 것으로 도시하였으나, 영상 처리 장치(200)는 프로세서(220)만을 포함할 수 있다(미도시). 예를 들어, 영상 처리 장치(200)의 프로세서(220)는 영상 처리가 요구되는 데이터를 입력받고, 입력받은 영상 데이터에 대해 저전력 모드를 위한 명도, 해상도, 및 정밀도 중 적어도 하나를 상술한 실시 예에 따라 조정하고 조정된 영상 데이터를 출력할 수 있다. 조정된 영상 데이터는 도4를 참조하여 후술하는 추가적인 영상 필터가 적용될 수 있다.According to an embodiment, the image processing apparatus 200 is illustrated as including an input unit 210, a processor 220, and an output unit 230, but the image processing apparatus 200 may include only the processor 220. Yes (not shown). For example, the processor 220 of the image processing apparatus 200 receives data required for image processing, and at least one of brightness, resolution, and precision for a low power mode for the received image data is described above. It can be adjusted according to and output the adjusted image data. An additional image filter described later with reference to FIG. 4 may be applied to the adjusted image data.

도4는 일 실시 예에 따른 영상에 존재하는 객체에 대한 경계(edge)를 강화시키는 필터를 적용하기 전과 후를 나타낸다.4 is a diagram illustrating before and after applying a filter for enhancing an edge of an object existing in an image according to an exemplary embodiment.

일 실시 예에 따른 프로세서(220)는 획득된 출력 픽셀 값들을 포함하는 영상 데이터에 대해 시인성을 향상시키기 위한 필터를 추가적으로 적용할 수 있다. 예를 들어, 프로세서(220)는 명도, 해상도, 정밀도 중 적어도 하나가 조정된 영상 데이터에 대해 시인성을 향상시키기 위한 필터를 추가적으로 적용할 수 있다.The processor 220 according to an embodiment may additionally apply a filter for improving visibility to image data including acquired output pixel values. For example, the processor 220 may additionally apply a filter for improving visibility to image data in which at least one of brightness, resolution, and precision is adjusted.

예를 들어, 프로세서(220)는 조정된 톤 커브에 기초하여 획득된 출력 픽셀 값들을 포함하는 영상 데이터에 대해 시인성을 향상시키기 위한 필터를 추가적으로 적용할 수 있다. 일 실시 예에 따른 필터는 영상 데이터에 존재하는 하나 이상의 객체에 대한 에지(Edge, 경계선)를 강화시키는 에지 강화 필터(Edge Enhancement Filter)일 수 있다. 필터는 객체와 배경 사이 또는 객체와 다른 객체 사이의 에지를 강화시킬 수 있다.For example, the processor 220 may additionally apply a filter for improving visibility to image data including output pixel values obtained based on the adjusted tone curve. The filter according to an embodiment may be an edge enhancement filter that enhances an edge (edge) of one or more objects existing in image data. Filters can enhance edges between an object and a background or between an object and another object.

일 실시 예에 따른 필터는 가우시안 필터, 소벨 필터, N-탭 보간 필터(N은 자연수)일 수 있다. 일 실시 예에 따른 필터는 객체의 에지의 크기와 방향을 결정하고 결정된 크기와 방향에 따라 에지 강화 알고리즘을 영상 데이터에 적용할 수 있다. 다만, 필터는 에지를 강화시키는 다른 어떠한 영상 처리 알고리즘을 적용시키는 필터도 될 수 있으므로 상술한 예에 제한되지 않는다.A filter according to an embodiment may be a Gaussian filter, a Sobel filter, or an N-tap interpolation filter (N is a natural number). The filter according to an embodiment may determine the size and direction of an edge of an object and apply an edge enhancement algorithm to image data according to the determined size and direction. However, the filter is not limited to the above-described example since it may be a filter to which any other image processing algorithm that enhances the edge is applied.

일 실시 예에 따른 프로세서(220)는 디스플레이 될 영상 데이터 내에 존재하는 여러 가지 객체들 중, 에지를 강화시킬 필요가 있는 하나 이상의 객체를 선택할 수 있다. 예를 들어, 멀티미디어 장치(100)가 게임 어플리케이션을 실행시키고 있는 경우, 프로세서(220)는 현재 디스플레이 될 영상 데이터 내에 존재하는 복수의 객체들 중에서 중요한 정보를 나타내는 것으로 판단되는 하나 이상의 객체를 선택할 수 있다. The processor 220 according to an exemplary embodiment may select one or more objects that need to strengthen an edge from among various objects existing in image data to be displayed. For example, when the multimedia device 100 is executing a game application, the processor 220 may select one or more objects determined to represent important information from among a plurality of objects existing in image data to be displayed. .

예를 들어, 프로세서(220)는 캐릭터(410), 캐릭터(410)를 조작할 수 있는 인터페이스(411, 412, 414, 413), 캐릭터(410)가 이동하는 위치를 보여주는 미니 맵(415)을 에지 강화 필터를 적용하기 위한 객체로 선택할 수 있다. 프로세서(220)는, 조정된 톤 커브에 기초하여 획득된 영상 데이터에 대해, 후처리(post-processing)로서, 선택된 객체(410, 411, 412, 414, 413, 415)의 에지를 강화하는 필터를 적용할 수 있다.For example, the processor 220 may display a character 410, interfaces 411, 412, 414, 413 that can manipulate the character 410, and a mini-map 415 showing the location where the character 410 moves. It can be selected as an object to apply the edge enhancement filter. The processor 220 is a filter that enhances the edges of the selected objects 410, 411, 412, 414, 413, 415 as post-processing for the image data acquired based on the adjusted tone curve. Can be applied.

즉, 조정된 톤 커브에 기초하여 디스플레이되는 영상의 출력 명도가 감소되더라도, 하나 이상의 객체의 에지를 강화하는 필터가 후처리(post-processing)로서 적용됨으로서, 사용자가 느끼는 시인성 감소가 최소화될 수 있다.That is, even if the output brightness of the displayed image is reduced based on the adjusted tone curve, a filter for enhancing the edges of one or more objects is applied as a post-processing, so that a decrease in visibility felt by the user can be minimized. .

도5는 일 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.5 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to an exemplary embodiment.

단계 510에서, 영상 처리 장치(100)는, 디스플레이 될 영상 데이터를 입력 받을 수 있다. 일 실시 예에서, 영상 데이터는 복수의 픽셀 값을 포함할 수 있다. 일 실시 예에서, 영상 처리 장치(100)는 현재 디스플레이 될 영상 프레임을 구성하는 픽셀들에 대한 입력 픽셀 값들을 버퍼(buffer)에 저장할 수 있다. 일 실시 예에 따른 영상 데이터는 입력 픽셀 값 외에, 영상 객체를 구성하는 버텍스(vertex)의 좌표 및 개수, 텍스처(texture) 데이터, 속성(properties), 기하학적 정보 중 적어도 하나를 포함할 수 있다.In operation 510, the image processing apparatus 100 may receive image data to be displayed. In an embodiment, the image data may include a plurality of pixel values. In an embodiment, the image processing apparatus 100 may store input pixel values for pixels constituting an image frame to be displayed currently in a buffer. Image data according to an embodiment may include at least one of coordinates and number of vertices constituting an image object, texture data, properties, and geometric information in addition to input pixel values.

단계 520에서, 영상 처리 장치(100)는, 입력받은 영상 데이터 중 일부 데이터에 대해 명도, 해상도, 및 정밀도 중 적어도 하나를 조정하여 출력 픽셀 값을 획득할 수 있다. In operation 520, the image processing apparatus 100 may obtain an output pixel value by adjusting at least one of brightness, resolution, and precision with respect to some of the input image data.

일 실시 예에서, 영상 처리 장치(100)는, 디스플레이 될 영상의 일부 영역에 대해 명도를 감소시킬 수 있다. 예를 들어, 사용자는 영상의 낮은 명도의 픽셀 값이 감소하는 것에 비해, 높은 명도의 픽셀 값이 감소할 때 시인성 감소를 더 적게 느끼므로, 영상 처리 장치(100)는 입력 픽셀 값의 전체 범위에 대한 출력 픽셀 값을 일률적으로(uniformly) 낮추는 대신 일부의 명도 범위에 포함된 입력 픽셀 값에 대응하는 출력 픽셀 값만을 변경하여 시인성 감소를 최소화할 수 있다. In an embodiment, the image processing apparatus 100 may reduce the brightness of a partial area of an image to be displayed. For example, since a user feels less visibility when a pixel value of high brightness decreases compared to a decrease in pixel value of low brightness of an image, the image processing apparatus 100 Instead of uniformly lowering the value of the output pixel, the decrease in visibility can be minimized by changing only the output pixel value corresponding to the input pixel value included in some brightness ranges.

일 실시 예에서, 영상 처리 장치(100)는, 디스플레이 될 영상의 일부 영역에 대해 해상도를 감소시킬 수 있다. 예를 들어, 영상 처리 장치(100)는 영상의 일부 영역을 선택하고, 선택된 영역에 대해 해상도를 감소시킬 수 있다. 일 실시 예에 따라, 영상 처리 장치(100)는 선택된 영역에 대해 렌더링 해상도를 감소거나 텍스처 해상도를 감소시킬 수 있다. 선택된 영역은 사용자 비주시 영역(Non-gazing region) 또는 밝은 명도 범위를 가지는 영역 또는 블록이 될 수 있으나 이에 제한되지 않는다.In an embodiment, the image processing apparatus 100 may reduce the resolution of a partial area of an image to be displayed. For example, the image processing apparatus 100 may select a partial region of an image and reduce the resolution of the selected region. According to an embodiment, the image processing apparatus 100 may reduce the rendering resolution or texture resolution of the selected area. The selected region may be a non-gazing region or a region or block having a bright brightness range, but is not limited thereto.

일 실시 예에서, 영상 처리 장치(100)는, 디스플레이 될 영상의 일부 영역에 대해 정밀도를 감소시킬 수 있다. 예를 들어, 영상 처리 장치(100)는 영상의 일부 영역을 선택하고, 선택된 영역에 대해 정밀도를 감소시킬 수 있다. 일 실시 예에 따라, 영상 처리 장치(100)는 선택된 영역에 존재하는 객체에 대해, 객체를 구성하는 버텍스(vertex)들의 개수를 감소시킬 수 있다. 선택된 영역은 사용자 비주시 영역(Non-gazing region) 또는 밝은 명도 범위를 가지는 영역 또는 블록이 될 수 있으나 이에 제한되지 않는다.In an embodiment, the image processing apparatus 100 may reduce the precision of a partial area of an image to be displayed. For example, the image processing apparatus 100 may select a partial region of an image and reduce the precision of the selected region. According to an embodiment, the image processing apparatus 100 may reduce the number of vertices constituting the object for an object existing in the selected area. The selected region may be a non-gazing region or a region or block having a bright brightness range, but is not limited thereto.

일 실시 예에서, 영상 처리 장치(100)는, 명도 조정, 해상도 조정, 및 정밀도 조정 중 어느 하나만을 수행할 수 있다. 다른 실시 예에서, 영상 처리 장치(100)는, 명도 조정, 해상도 조정, 및 정밀도 조정 중 두 가지 이상을 수행할 수 있다. 영상 처리 장치(100)는, 명도 조정, 해상도 조정, 및 정밀도 조정 중 두 가지 이상을 수행하는 경우, 조정의 대상이 되는 영상 내 영역을 독립적으로 결정할 수 있다.In an embodiment, the image processing apparatus 100 may perform only one of brightness adjustment, resolution adjustment, and precision adjustment. In another embodiment, the image processing apparatus 100 may perform two or more of brightness adjustment, resolution adjustment, and precision adjustment. When two or more of brightness adjustment, resolution adjustment, and precision adjustment are performed, the image processing apparatus 100 may independently determine an area within an image to be adjusted.

단계 530에서, 영상 처리 장치(100)는, 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력할 수 있다. 일 실시 예에 따른 출력 픽셀 값을 포함하는 영상 데이터는 버퍼에 저장되고, 버퍼에 저장된 영상 데이터는 멀티미디어 장치(100)의 화면에 최종적으로 디스플레이 될 수 있다.In operation 530, the image processing apparatus 100 may output image data including the obtained output pixel value. Image data including output pixel values according to an exemplary embodiment may be stored in a buffer, and image data stored in the buffer may be finally displayed on the screen of the multimedia apparatus 100.

도6은 구체적인 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.6 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to a specific embodiment.

단계 610에서, 영상 처리 장치(100)는, 디스플레이 될 영상 데이터를 입력 받을 수 있다. 일 실시 예에서, 영상 데이터는 복수의 픽셀 값을 포함할 수 있다. 일 실시 예에서, 영상 처리 장치(100)는 현재 디스플레이 될 영상 프레임을 구성하는 픽셀들에 대한 입력 픽셀 값을 버퍼(buffer)에 저장할 수 있다.In operation 610, the image processing apparatus 100 may receive image data to be displayed. In an embodiment, the image data may include a plurality of pixel values. In an embodiment, the image processing apparatus 100 may store input pixel values for pixels constituting an image frame to be displayed currently in a buffer.

단계 620에서, 영상 처리 장치(100)는, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)를 조정할 수 있다. 영상 처리 장치(100)는 조정된 톤 커브에 기초하여, 단계 610에서 입력받은 영상 데이터에 포함된 픽셀들 중 적어도 하나의 픽셀에 대해, 입력 픽셀 값에 대응하는 출력 픽셀 값을 획득할 수 있다.In operation 620, the image processing apparatus 100 may adjust a tone curve representing a correlation between the input pixel value and the output pixel value. The image processing apparatus 100 may obtain an output pixel value corresponding to an input pixel value for at least one pixel among pixels included in the image data received in operation 610 based on the adjusted tone curve.

일 실시 예에서, 영상 처리 장치(100)는, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 톤 커브(tone curve)의 입력 픽셀 값의 범위 중 전체 또는 일부를 선택하여 선택된 범위에 포함되는 입력 픽셀 값들에 대응하는 출력 픽셀 값을 입력 픽셀 값보다 작은 픽셀 값을 가지도록 톤 커브를 조정할 수 있다. 일 실시 예에서, 영상 처리 장치(100)는, 톤 커브의 입력 픽셀 값의 범위 중 일부의 범위를 선택하여, 선택된 범위에 포함되는 입력 픽셀 값에 대응하는 출력 픽셀 값을 변경하고, 선택되지 않은 범위 내의 입력 픽셀 값에 대응하는 출력 픽셀 값은 변경하지 않을 수 있다. 톤 커브를 조정하는 방법은 도3을 참조하여 상술하였으므로 상세한 설명은 생략한다.In an embodiment, the image processing apparatus 100 selects all or part of a range of input pixel values of a tone curve representing a correlation between an input pixel value and an output pixel value, and input included in the selected range. The tone curve can be adjusted so that the output pixel values corresponding to the pixel values have a pixel value smaller than the input pixel value. In an embodiment, the image processing apparatus 100 selects a partial range of the range of input pixel values of the tone curve, changes the output pixel value corresponding to the input pixel value included in the selected range, and is not selected. The output pixel value corresponding to the input pixel value within the range may not be changed. Since the method of adjusting the tone curve has been described above with reference to FIG. 3, detailed descriptions are omitted.

일 실시 예에서, 영상 처리 장치(100)는, 영상 처리 장치(100) 내에 기 저장된 복수의 톤 커브 중에서 사용하는 톤 커브를 선택할 수 있다. 일 실시 예에서, 영상 처리 장치(100)는 현재 실행 중인 어플리케이션의 종류 또는 디스플레이 되는 영상 데이터의 종류에 따라, 기 저장된 복수의 톤 커브들 중에서 사용하는 톤 커브를 다르게 선택할 수 있다.In an embodiment, the image processing apparatus 100 may select a tone curve to be used from among a plurality of tone curves previously stored in the image processing apparatus 100. In an embodiment, the image processing apparatus 100 may differently select a tone curve to be used from among a plurality of pre-stored tone curves according to a type of an application currently being executed or a type of displayed image data.

단계 630에서, 영상 처리 장치(100)는, 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력할 수 있다. 일 실시 예에 따른 출력 픽셀 값을 포함하는 영상 데이터는 버퍼에 저장되고, 버퍼에 저장된 영상 데이터는 멀티미디어 장치(100)의 화면에 최종적으로 디스플레이 될 수 있다.In operation 630, the image processing apparatus 100 may output image data including the obtained output pixel value. Image data including output pixel values according to an exemplary embodiment may be stored in a buffer, and image data stored in the buffer may be finally displayed on the screen of the multimedia apparatus 100.

도7은 추가적인 실시 예에 따른 영상의 디스플레이에 소모되는 전력을 감소시키기 위한 영상 처리 방법의 흐름도를 나타낸다.7 is a flowchart illustrating an image processing method for reducing power consumption for displaying an image according to an additional exemplary embodiment.

단계 710, 720, 740은 각각 도5의 단계 510, 520, 530과 대응되므로 상세한 설명을 생략한다.Steps 710, 720, and 740 correspond to steps 510, 520, and 530 of FIG. 5, respectively, and thus detailed descriptions thereof will be omitted.

단계 730에서, 영상 처리 장치(100)는 단계 720에서 획득된 영상 데이터에 대해 필터를 적용할 수 있다. 예를 들어, 영상 처리 장치(100)는 단계 720에서 획득된 영상 데이터에 대해 시인성을 향상시키기 위한 필터를 추가적으로 적용할 수 있다. 일 실시 예에 따른 필터는 영상 데이터에 존재하는 하나 이상의 객체에 대한 에지(Edge), 예를 들어 경계선을 강화시키는 에지 강화 필터(Edge Enhancement Filter)일 수 있다. 필터는 객체와 배경 사이 또는 객체와 다른 객체 사이의 에지를 강화시킬 수 있다.In operation 730, the image processing apparatus 100 may apply a filter to the image data acquired in operation 720. For example, the image processing apparatus 100 may additionally apply a filter for improving visibility to the image data acquired in operation 720. The filter according to an embodiment may be an edge enhancement filter that enhances an edge, for example, a boundary line for one or more objects existing in image data. Filters can enhance edges between an object and a background or between an object and another object.

일 실시 예에 따른 필터는 가우시안 필터, 소벨 필터, N-탭 보간 필터(N은 자연수)일 수 있다. 일 실시 예에 따른 필터는 객체의 에지의 크기와 방향을 결정하고 결정된 크기와 방향에 따라 에지 강화 알고리즘을 적용할 수 있다. 다만, 필터는 에지를 강화시키는 영상 처리 알고리즘을 적용시키는 어떠한 필터도 될 수 있으므로 상술한 예에 제한되지 않는다.A filter according to an embodiment may be a Gaussian filter, a Sobel filter, or an N-tap interpolation filter (N is a natural number). The filter according to an embodiment may determine a size and direction of an edge of an object and apply an edge enhancement algorithm according to the determined size and direction. However, the filter is not limited to the above-described example because it may be any filter to which an image processing algorithm for enhancing an edge is applied.

단계 730에서, 영상 처리 장치(100)는 디스플레이 될 영상 데이터 내에 존재하는 여러 가지 객체들 중, 에지를 강화시킬 필요가 있는 하나 이상의 객체를 선택할 수 있다. 예를 들어, 멀티미디어 장치(100)가 게임 어플리케이션을 실행시키고 있는 경우, 영상 처리 장치(100)는 현재 디스플레이 될 영상 데이터 내에 존재하는 복수의 객체들 중에서 중요한 정보를 나타내는 것으로 판단되는 하나 이상의 객체를 선택할 수 있다.In operation 730, the image processing apparatus 100 may select one or more objects that need to strengthen edges from among various objects existing in the image data to be displayed. For example, when the multimedia device 100 is running a game application, the image processing device 100 selects one or more objects determined to represent important information from among a plurality of objects present in the image data to be displayed. I can.

예를 들어, 단계 720에서, 조정된 톤 커브에 기초하여 디스플레이 되는 영상의 출력 명도가 감소되더라도, 단계 730에서 하나 이상의 객체의 에지를 강화하는 필터가 후처리(post-processing)로서 적용됨으로서, 사용자가 느끼는 시인성 감소가 최소화될 수 있다.For example, in step 720, even if the output brightness of the displayed image is reduced based on the adjusted tone curve, in step 730, a filter for enhancing the edges of one or more objects is applied as a post-processing, so that the user The decrease in visibility felt by the person can be minimized.

한편, 상술한 영상 처리 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM. CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있을 수 있다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the above-described image processing method can be implemented as a computer-readable code on a computer-readable recording medium. The computer-readable recording medium includes all types of recording devices that store data that can be read by a computer system. Examples of computer-readable recording media include ROM and RAM. There may be CD-ROMs, magnetic tapes, floppy disks, optical data storage devices, etc. In addition, the computer-readable recording medium is distributed over a computer system connected through a network, so that code that can be read by the processor can be stored and executed in a distributed manner.

본 발명은 특정한 최상의 실시 예와 관련하여 설명되었지만, 이외에 본 발명에 대체, 변형 및 수정이 적용된 발명들은 전술한 설명에 비추어 당업자에게 명백할 것이다. 즉, 청구범위는 이러한 모든 대체, 변형 및 수정된 발명을 포함하도록 해석한다. 그러므로 이 명세서 및 도면에서 설명한 모든 내용은 예시적이고 비제한적인 의미로 해석해야 한다.Although the present invention has been described in connection with a particular best embodiment, other inventions to which substitutions, modifications and modifications are applied will be apparent to those skilled in the art in light of the foregoing description. That is, the claims are to be construed to cover all such substitutions, modifications and modifications. Therefore, all contents described in this specification and drawings should be interpreted in an illustrative and non-limiting sense.

Claims (17)

영상의 디스플레이를 위해 소모되는 전력을 감소시키기 위한 영상 처리 장치에 있어서,
디스플레이 될 영상 데이터를 입력 받는 입력부;
상기 영상 데이터의 일부에 대한 명도, 해상도, 및 정밀도 중 적어도 하나를 조정하여 출력 픽셀 값을 획득하는 적어도 하나 이상의 프로세서; 및
상기 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력하는 출력부를 포함하고,
상기 적어도 하나 이상의 프로세서가 상기 영상 데이터의 일부에 대한 명도를 조정하여 출력 픽셀 값을 획득하는 것은,
현재 실행 중인 어플리케이션의 종류 또는 상기 영상 데이터의 종류에 따라, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 기 저장된 복수의 톤 커브(tone curve)들 중에서 상기 출력 픽셀 값을 획득하기 위한 톤 커브를 선택하고,
상기 선택된 톤 커브에 기초하여, 상기 영상 데이터에 포함된 픽셀들 중에서 적어도 하나의 픽셀에 대해 입력 픽셀 값에 대응하는 상기 출력 픽셀 값을 획득하는 것을 포함하고,
상기 적어도 하나 이상의 프로세서가 상기 영상 데이터의 일부에 대한 정밀도를 조정하여 출력 픽셀 값을 획득하는 것은,
상기 영상 데이터에서 정밀도를 감소시키기 위한 영역을 선택하고,
상기 선택된 영역에 존재하는 하나 이상의 객체들을 구성하는 버텍스(vertex)의 개수를 감소시키는 것을 포함하는 것을 특징으로 하는 영상 처리 장치.In the image processing apparatus for reducing power consumption for displaying an image,
An input unit receiving image data to be displayed;
At least one processor for obtaining an output pixel value by adjusting at least one of brightness, resolution, and precision of a portion of the image data; And
And an output unit for outputting image data including the obtained output pixel value,
The at least one processor adjusting the brightness of a portion of the image data to obtain an output pixel value,
According to the type of the currently running application or the type of the image data, a tone curve for acquiring the output pixel value from among a plurality of pre-stored tone curves representing the correlation between the input pixel value and the output pixel value Choose,
Based on the selected tone curve, obtaining the output pixel value corresponding to the input pixel value for at least one pixel among pixels included in the image data,
The at least one processor adjusting the precision of a part of the image data to obtain an output pixel value,
Selecting a region for reducing the precision in the image data,
And reducing the number of vertices constituting one or more objects existing in the selected area. 삭제delete 제1항에 있어서, 상기 선택된 톤 커브는,
상기 톤 커브의 입력 픽셀 값의 전체 범위 중에서 일부의 범위에 속한 상기 적어도 하나의 픽셀에 대해 입력 값보다 작은 출력 값을 획득하도록 구성된 것을 특징으로 하는 영상 처리 장치The method of claim 1, wherein the selected tone curve is
And obtaining an output value smaller than an input value for the at least one pixel belonging to a partial range of the entire range of input pixel values of the tone curve 제3항에 있어서, 상기 일부의 범위는, 소정의 기준 값 이상인 입력 픽셀 값들을 포함하는 것을 특징으로 하는 영상 처리 장치.The image processing apparatus of claim 3, wherein the partial range includes input pixel values that are equal to or greater than a predetermined reference value. 제1항에 있어서, 상기 선택된 톤 커브는,
비선형적(non-linear) 커브인 것을 특징으로 하는 영상 처리 장치.The method of claim 1, wherein the selected tone curve is
Image processing apparatus, characterized in that the non-linear (non-linear) curve. 제1항에 있어서, 상기 적어도 하나 이상의 프로세서는,
상기 영상 데이터의 일부에 대한 렌더링 해상도 또는 텍스처 해상도를 감소시키는 것을 특징으로 하는 영상 처리 장치.The method of claim 1, wherein the at least one processor,
And reducing a rendering resolution or a texture resolution for a portion of the image data. 삭제delete 제1항에 있어서, 상기 적어도 하나 이상의 프로세서는,
상기 영상 데이터 내에 존재하는 하나 이상의 객체의 경계선(edge)을 강화시키는 필터를 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터에 대해 적용하는 것을 특징으로 하는 영상 처리 장치.The method of claim 1, wherein the at least one processor,
And applying a filter for enhancing an edge of one or more objects present in the image data to the image data including the obtained output pixel values. 영상의 디스플레이를 위해 소모되는 전력을 감소시키기 위한 영상 처리 방법에 있어서,
디스플레이 될 영상 데이터를 입력 받는 단계;
상기 영상 데이터의 일부에 대한 명도, 해상도, 및 정밀도 중 적어도 하나를 조정하여 출력 픽셀 값을 획득하는 단계; 및
상기 획득된 출력 픽셀 값을 포함하는 영상 데이터를 출력하는 단계를 포함하고,
상기 영상 데이터의 일부에 대한 명도를 조정하여 출력 픽셀 값을 획득하는 단계는,
현재 실행 중인 어플리케이션의 종류 또는 상기 영상 데이터의 종류에 따라, 입력 픽셀 값과 출력 픽셀 값의 상관 관계를 나타내는 기 저장된 복수의 톤 커브(tone curve)들 중에서 상기 출력 픽셀 값을 획득하기 위한 톤 커브를 선택하고,
상기 선택된 톤 커브에 기초하여, 상기 영상 데이터에 포함된 픽셀들 중에서 적어도 하나의 픽셀에 대해 입력 픽셀 값에 대응하는 상기 출력 픽셀 값을 획득하는 단계를 포함하고,
상기 영상 데이터의 일부에 대한 정밀도를 조정하여 출력 픽셀 값을 획득하는 단계는,
상기 영상 데이터에서 정밀도를 감소시키기 위한 영역을 선택하고,
상기 선택된 영역에 존재하는 하나 이상의 객체들을 구성하는 버텍스(vertex)의 개수를 감소시키는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.In an image processing method for reducing power consumed for displaying an image,
Receiving image data to be displayed;
Adjusting at least one of brightness, resolution, and precision of a portion of the image data to obtain an output pixel value; And
Including the step of outputting image data including the obtained output pixel value,
The step of obtaining an output pixel value by adjusting the brightness of a part of the image data,
According to the type of the currently running application or the type of the image data, a tone curve for acquiring the output pixel value from among a plurality of pre-stored tone curves representing the correlation between the input pixel value and the output pixel value Choose,
Based on the selected tone curve, obtaining the output pixel value corresponding to an input pixel value for at least one pixel among pixels included in the image data,
The step of obtaining an output pixel value by adjusting the precision of a part of the image data,
Selecting a region for reducing the precision in the image data,
And reducing the number of vertices constituting one or more objects existing in the selected area. 삭제delete 제9항에 있어서, 상기 선택된 톤 커브는,
상기 톤 커브의 입력 픽셀 값의 전체 범위 중에서 일부의 범위에 속한 상기 적어도 하나의 픽셀에 대해 입력 값보다 작은 출력 값을 획득하도록 구성된 것을 특징으로 하는 영상 처리 방법.The method of claim 9, wherein the selected tone curve,
And obtaining an output value smaller than an input value for the at least one pixel belonging to a partial range of the entire range of input pixel values of the tone curve. 제11항에 있어서, 상기 일부의 범위는, 소정의 기준 값 이상인 입력 픽셀 값들을 포함하는 것을 특징으로 하는 영상 처리 방법.The image processing method of claim 11, wherein the partial range includes input pixel values that are equal to or greater than a predetermined reference value. 제9항에 있어서, 상기 선택된 톤 커브는,
비선형적(non-linear) 커브인 것을 특징으로 하는 영상 처리 방법.The method of claim 9, wherein the selected tone curve,
Image processing method, characterized in that the non-linear (non-linear) curve. 제9항에 있어서, 상기 출력 픽셀 값을 획득하는 단계는,
상기 영상 데이터의 일부에 대한 렌더링 해상도 또는 텍스처 해상도를 감소시키는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.The method of claim 9, wherein obtaining the output pixel value comprises:
And reducing a rendering resolution or a texture resolution for a portion of the image data. 삭제delete 제9항에 있어서, 상기 출력 픽셀 값을 획득하는 단계는,
상기 영상 데이터 내에 존재하는 하나 이상의 객체의 경계선(edge)을 강화시키는 필터를 상기 획득된 출력 픽셀 값을 포함하는 영상 데이터에 대해 적용하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.The method of claim 9, wherein obtaining the output pixel value comprises:
And applying a filter for enhancing an edge of one or more objects present in the image data to the image data including the obtained output pixel values. 제 9 항, 제 11 항 내지 제 14 항, 및 제 16 항 중 어느 한 항에서 수행되는 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.

A computer-readable recording medium storing a program for executing the method performed in any one of claims 9, 11 to 14, and 16 on a computer.
KR1020160111072A 2015-12-10 2016-08-30 Image processing Method and apparatus for low-power mode KR102214439B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/364,979 US10114447B2 (en) 2015-12-10 2016-11-30 Image processing method and apparatus for operating in low-power mode

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562265613P 2015-12-10 2015-12-10
US62/265,613 2015-12-10

Publications (2)

Publication Number Publication Date
KR20170069134A KR20170069134A (en) 2017-06-20
KR102214439B1 true KR102214439B1 (en) 2021-02-09

Family

ID=59281424

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160111072A KR102214439B1 (en) 2015-12-10 2016-08-30 Image processing Method and apparatus for low-power mode

Country Status (1)

Country Link
KR (1) KR102214439B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030059116A1 (en) * 2001-08-13 2003-03-27 International Business Machines Corporation Representation of shapes for similarity measuring and indexing
US20070201740A1 (en) * 2003-09-10 2007-08-30 Naoki Kuwata Output image data generating device & method of generating output image data
US20140247870A1 (en) * 2011-04-28 2014-09-04 Koninklijke Philips N.V. Apparatuses and methods for hdr image encoding and decodng
JP2015002443A (en) * 2013-06-14 2015-01-05 キヤノン株式会社 Image processing apparatus and image processing method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101441307B1 (en) * 2008-10-10 2014-09-17 삼성전자주식회사 Device and method of processing image for power comsumption reduction

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030059116A1 (en) * 2001-08-13 2003-03-27 International Business Machines Corporation Representation of shapes for similarity measuring and indexing
US20070201740A1 (en) * 2003-09-10 2007-08-30 Naoki Kuwata Output image data generating device & method of generating output image data
US20140247870A1 (en) * 2011-04-28 2014-09-04 Koninklijke Philips N.V. Apparatuses and methods for hdr image encoding and decodng
JP2015002443A (en) * 2013-06-14 2015-01-05 キヤノン株式会社 Image processing apparatus and image processing method

Also Published As

Publication number Publication date
KR20170069134A (en) 2017-06-20

Similar Documents

Publication Publication Date Title
CN107694092B (en) System, method, and medium for automatic image processing of images having similar luminosity
US10853686B2 (en) Generation of salient contours using live video
CN105574918B (en) A kind of material adding method, device and the terminal of 3D models
JP5121294B2 (en) Image processing method, image processing apparatus, program, recording medium, and integrated circuit
US8237730B1 (en) Tone mapping for motion pictures
CN108701351B (en) Image display enhancement method and device
JP2000134486A (en) Image processing unit, image processing method and storage medium
EP3664018B1 (en) Reducing aliasing artifacts in foveated rendering using cross-resolution modulation
KR101710966B1 (en) Image anti-aliasing method and apparatus
US20180144446A1 (en) Image processing apparatus and method
KR20200043432A (en) Technology for providing virtual lighting adjustments to image data
WO2020019164A1 (en) Video processing method and device, and computer-readable storage medium
EP3816941A1 (en) Image processing system and method
JP5014274B2 (en) Image processing apparatus, image processing method, image processing system, program, recording medium, and integrated circuit
CN111406406A (en) Apparatus and method for dynamic range extension in virtual reality scenes
US20200065941A1 (en) Computational blur for varifocal displays
JP6527641B2 (en) Image processing apparatus and superimposed image generation method
US9489748B2 (en) Image processing apparatus and method, image processing system, and non-transitory computer readable medium
US10114447B2 (en) Image processing method and apparatus for operating in low-power mode
KR102214439B1 (en) Image processing Method and apparatus for low-power mode
CN113691737B (en) Video shooting method and device and storage medium
US8698832B1 (en) Perceptual detail and acutance enhancement for digital images
KR102606373B1 (en) Method and apparatus for adjusting facial landmarks detected in images
US11270475B2 (en) Variable rendering system and method
JP6387238B2 (en) Movie color adjustment method and movie color adjustment system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant