WO2021040075A1 - Image display apparatus and image processing method thereof - Google Patents

Image display apparatus and image processing method thereof Download PDF

Info

Publication number
WO2021040075A1
WO2021040075A1 PCT/KR2019/010941 KR2019010941W WO2021040075A1 WO 2021040075 A1 WO2021040075 A1 WO 2021040075A1 KR 2019010941 W KR2019010941 W KR 2019010941W WO 2021040075 A1 WO2021040075 A1 WO 2021040075A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
foreground
background
unit
area
Prior art date
Application number
PCT/KR2019/010941
Other languages
French (fr)
Korean (ko)
Inventor
서재교
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to PCT/KR2019/010941 priority Critical patent/WO2021040075A1/en
Publication of WO2021040075A1 publication Critical patent/WO2021040075A1/en

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Definitions

  • FIG. 1 is a control block diagram of an image display device according to an embodiment of the present invention.
  • the foreground processing unit 31 is for 3D enhancement processing for an image in the foreground region, and is implemented including an algorithm for image quality processing and a processor for executing the algorithm.
  • the foreground processing unit 31 receives information on the location and size of the foreground area from the foreground detection unit 30, and provides contrast, noise reduction, and edge restoration of the foreground image corresponding to the location and size of the foreground area. Edge Restoration), edge enhancement, gamma correction, color, tint, and sharpness.
  • a setting value for each image quality adjustment item of the foreground processing unit 31 is set by the control unit 60 to be described later.
  • the background processing unit 40 includes a dynamic contrast adjustment unit for varying the contrast level according to the luminance level of the image input with respect to the image in the background area.
  • the dynamic contrast adjustment unit reduces the overall luminance level of the image when adjusting the dynamic contrast of the image in the background area.
  • the setting value for the contrast adjustment item of the background processing unit 40 is set by the control unit 60 to be described later.
  • Contrast adjustment items of the dynamic contrast adjustment unit may be gamma, look-up table, backlight brightness, and the like, and the background processing unit 40 processes the image quality of the background image in response to a setting value set by the control unit 60.
  • the synthesizing unit 50 synthesizes and outputs the image of the foreground processing unit 31 and the image of the background processing unit 40.
  • FIG. 6A shows an input image input to an image display device
  • FIG. 6B shows an image of a foreground area processed by the foreground processing unit 31.
  • a three-dimensional effect is augmented by detecting a moving bird and an object as a foreground
  • 6C shows that the background processing unit 40 reduces the total luminance level of the image in the background region
  • FIG. 6D shows a screen synthesized by the combining unit 50 and displayed on the display panel 70. As a whole, it can be seen that the three-dimensional effect of the foreground is remarkably expressed and the three-dimensional effect is enhanced.

Abstract

The present invention relates to an image display apparatus and an image processing method thereof. An image display apparatus and an image processing method thereof according to an embodiment of the present invention are provided, and the image display apparatus comprises: a foreground detection unit for detecting a foreground; a foreground detection unit for augmenting a three-dimensional effect of an image of a foreground region; and a background processing unit for lowering a brightness level of a background image. Accordingly, the three-dimensional effect in the entire image can be further enhanced, while reducing power consumption, by processing an image of a foreground region such that the three-dimensional effect thereof is augmented and by reducing brightness of an image of a background region.

Description

영상표시장치 및 이의 영상처리방법Image display device and image processing method thereof
본 발명은 영상표시장치 및 이의 영상처리방법에 관한 것으로, 보다 구체적으로는 입체감을 증강시키기 위한 영상표시장치 및 이의 영상처리방법에 관한 것이다.The present invention relates to an image display device and an image processing method thereof, and more particularly, to an image display device for enhancing a three-dimensional effect and an image processing method thereof.
화질 처리분야에서는 동영상에서 사람의 얼굴을 검출하고, 이를 분리 처리하여 입체감 등의 화질을 높이기 위한 시도들이 있어 왔다. 하지만, 사람의 얼굴이 영상에서 차지하는 비중이 높지 않고 얼굴에만 국한하여 입체감을 표현하기 때문에 전체 화면에서는 입체감 효과가 그리 크지 않다. In the field of image quality processing, there have been attempts to improve image quality such as a three-dimensional effect by detecting a person's face in a video and processing it separately. However, since the human face does not occupy a high proportion of the image and expresses a three-dimensional effect only on the face, the three-dimensional effect is not so great on the entire screen.
한편, 소비전력 절감과 관련하여 다이나믹 콘트라스트(Dynamic Contrast) 기능을 통해 밝기를 조절하는 기술이 알려져 있다. 그런데, 다이나믹 콘트라스트 기능은 영상 전체의 레벨을 제어함으로 인해서 정지된 장면에서는 대조비가 감소하는 문제가 있다. 또한, 사용자 시력 보호를 위해 영상의 전체를 어둡게 할 경우 정지 영상에서는 시력의 피로도를 보호하지 못하는 문제가 있다. On the other hand, in relation to power consumption reduction, a technique of adjusting brightness through a dynamic contrast function is known. However, since the dynamic contrast function controls the level of the entire image, there is a problem that the contrast ratio decreases in a still scene. In addition, when the entire image is darkened to protect the user's eyesight, there is a problem in that the fatigue of the eyesight cannot be protected in the still image.
본 발명이 해결하고자 하는 과제는 영상에서 입체감 강화를 통해 화질을 증대시키기 위한 영상표시장치 및 그 제어방법을 제공하는 것이다. The problem to be solved by the present invention is to provide an image display device and a control method thereof for increasing image quality by enhancing a three-dimensional effect in an image.
본 발명이 해결하고자 하는 과제는 화질을 증대시키기면서도 소비전력을 감소시키는 것이다.The problem to be solved by the present invention is to reduce power consumption while increasing image quality.
본 발명이 해결하고자 하는 과제는 소비전력을 감소시키면서도 사용자의 시력과 피로도를 모두 보호할 수 있는 영상표시장치 및 그 제어방법을 제공하는 것이다. An object to be solved by the present invention is to provide an image display device capable of protecting both eyesight and fatigue of a user while reducing power consumption and a control method thereof.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 영상표시장치 및 이의 영상처리방법은 전경을 검출하는 전경검출부과, 전경 영역의 영상의 입체감을 증강처리하는 전경검출부, 배경 영상의 휘도 레벨을 감소 처리하는 배경처리부를 구비하여, 전체 영상에서 입체감의 증강 효과를 더욱 높일 수 있다.In order to solve the above-described problems, an image display device and an image processing method thereof according to an embodiment of the present invention include a foreground detection unit that detects a foreground, a foreground detection unit that enhances a three-dimensional effect of an image in the foreground region, and a background image. By providing a background processing unit for reducing the luminance level, it is possible to further enhance the effect of enhancing a three-dimensional effect in the entire image.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 영상표시장치 및 이의 영상처리방법은 배경영역의 영상에 대해 휘도 레벨에 따라 콘트라스트 레벨을 가변하는 다이나믹 콘트라스트 조정을 수행하되 전체 게인을 감소시켜 휘도 레벨을 감소시킨다.In order to solve the above-described problems, the image display device and the image processing method thereof according to an embodiment of the present invention perform dynamic contrast adjustment of varying the contrast level according to the luminance level for the image in the background area, but to adjust the overall gain. To decrease the luminance level.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 영상표시장치 및 이의 영상처리방법은 배경영역의 영상에 대해 콘트라스트 조정 커브의 블랙 해상도는 유지하면서 전체 레벨을 감소처리함으로써 효과적으로 배경영역의 영상의 휘도를 감소시킬 수 있다.In order to solve the above-described problems, an image display device and an image processing method thereof according to an embodiment of the present invention effectively reduce the overall level while maintaining the black resolution of the contrast adjustment curve for the image of the background area. It is possible to reduce the luminance of the image of.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 영상표시장치 및 이의 영상처리방법은 배경 영역에 대응하는 백라이트 모듈의 밝기를 감소시키는 로컬 디밍제어신호를 출력함으로써 효과적으로 배경영역의 영상의 휘도를 감소시킬 수 있다.In order to solve the above-described problems, an image display device and an image processing method thereof according to an embodiment of the present invention effectively output a local dimming control signal for reducing the brightness of a backlight module corresponding to the background area. Luminance can be reduced.
상기한 바와 같이, 본 발명에 의한 영상표시장치 및 이의 제어방법은 배경영역의 영상의 밝기를 감소시킴으로써 전체 영상에서 입체감을 더욱 증대할 수 있다. As described above, the image display device and the control method thereof according to the present invention can further increase a three-dimensional effect in the entire image by reducing the brightness of the image in the background area.
상기한 바와 같이, 본 발명에 의한 영상표시장치 및 이의 제어방법은 다이나믹 콘트라스트 조정이나 로컬 디밍제어를 통해 배경영역의 영상의 밝기를 감소시킴으로써 소비전력을 감소시킬 수 있다. As described above, the image display device and its control method according to the present invention can reduce power consumption by reducing the brightness of an image in a background area through dynamic contrast adjustment or local dimming control.
상기한 바와 같이, 본 발명에 의한 영상표시장치 및 이의 제어방법은 소비전력을 감소시키면서도 사용자의 시력과 피로도를 모두 보호할 수 있다.As described above, the image display device and the control method thereof according to the present invention can protect both eyesight and fatigue of a user while reducing power consumption.
도 1은 본 발명의 일 실시예에 따른 영상표시장치의 제어블록도이다. 1 is a control block diagram of an image display device according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 따른 배경처리부의 다이나믹 콘트라스트 조정의 일 예를 도시한 것이다. 2 illustrates an example of dynamic contrast adjustment of a background processing unit according to an embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따른 영상표시장치에서 화질처리모드를 설정하는 방법을 설명하기 위한 흐름도이다.3 is a flowchart illustrating a method of setting an image quality processing mode in an image display device according to an embodiment of the present invention.
도 4는 본 발명의 일 실시예에 따른 영상표시장치의 화질처리모드에 관한 UI메뉴의 일 예를 도시한 것이다. 4 illustrates an example of a UI menu related to an image quality processing mode of an image display device according to an embodiment of the present invention.
도 5는 본 발명의 일 실시예에 따른 영상표시장치의 영상처리방법을 나타내는 흐름도이고, 도 6은 도 5의 영상처리방법을 도식적으로 설명하기 위한 도면이다.5 is a flowchart illustrating an image processing method of an image display device according to an embodiment of the present invention, and FIG. 6 is a diagram schematically illustrating the image processing method of FIG. 5.
도 7은 본 발명의 다른 실시예에 따른 영상표시장치의 제어블록도이다. 7 is a control block diagram of an image display device according to another embodiment of the present invention.
도 8은 본 발명의 다른 실시예에 따른 영상표시장치의 영상처리방법을 나타내는 흐름도이다.8 is a flowchart illustrating an image processing method of an image display device according to another exemplary embodiment of the present invention.
이하, 도면을 참조하여 본 발명의 구체적인 실시예들에 대해 설명하기로 한다.Hereinafter, specific embodiments of the present invention will be described with reference to the drawings.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in a variety of different forms, and only these embodiments make the disclosure of the present invention complete, and are common knowledge in the technical field to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have, and the invention is only defined by the scope of the claims. The same reference numerals refer to the same elements throughout the specification.
도 1은 본 발명의 일 실시예에 따른 영상표시장치의 제어블록도이다. 본 실시예에 따른 영상표시장치는 신호수신부(10), 스케일러(20), 프레임메모리(21), 전경검출부(30), 전경처리부(31), 배경처리부(40), 합성부(50), 및 제어부(60)를 포함한다.1 is a control block diagram of an image display device according to an embodiment of the present invention. The image display device according to the present embodiment includes a signal receiving unit 10, a scaler 20, a frame memory 21, a foreground detecting unit 30, a foreground processing unit 31, a background processing unit 40, a synthesizing unit 50, and And a control unit 60.
신호수신부(10)는 외부로부터 신호를 수신하기 위한 것으로, 방송신호를 수신하기 위한 방송수신부(11), 외부기기와의 연결을 위한 외부기기 인터페이스부(13), 및 인터넷 연결을 위한 네트워크 인터페이스부(15)를 포함할 수 있다. The signal receiving unit 10 is for receiving a signal from the outside, and a broadcast receiving unit 11 for receiving a broadcast signal, an external device interface unit 13 for connection with an external device, and a network interface unit for Internet connection (15) may be included.
방송수신부(11)는 RF 방송신호를 수신하여 채널 튜닝하여 IF 신호를 출력하는 RF 튜너, 및 튜너에서 변환된 IF 신호를 복조하는 복조부를 포함할 수 있다.The broadcast receiver 11 may include an RF tuner that receives an RF broadcast signal, tunes a channel, and outputs an IF signal, and a demodulator that demodulates the IF signal converted by the tuner.
외부기기 인터페이스부(13)는 예컨대, PC, 셋톱 박스 또는 멀티미디어 재생 장치로부터 컨텐츠를 수신하는 HDMI(High Definition Multimedia Interface) 커넥터, 컴포넌트 비디오 커넥터(component video connector), 컴포지트 비디오 커넥터(composite video connector), 디-서브(D-sub) 커넥터 등을 포함할 수 있다. The external device interface unit 13 includes, for example, a High Definition Multimedia Interface (HDMI) connector, a component video connector, a composite video connector, for receiving content from a PC, a set-top box, or a multimedia playback device. It may include a D-sub connector or the like.
네트워크 인터페이스부(15)는 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 통신모듈을 포함한다. 네트워크 인터페이스부(15)는, 유선 네트워크와의 접속을 위해 이더넷(Ethernet) 단자 등을 구비하거나, 또는 무선 네트워크와의 접속을 위해 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등을 사용할 수 있다.The network interface unit 15 includes a communication module for connecting to a wired/wireless network including an Internet network. The network interface unit 15 includes an Ethernet terminal for connection to a wired network, or WLAN (Wireless LAN) (Wi-Fi), Wibro (Wireless broadband), for connection to a wireless network. Wimax (World Interoperability for Microwave Access) and HSDPA (High Speed Downlink Packet Access) communication standards can be used.
스케일러(20)는 수신한 영상의 크기를 조정하기 위한 것으로, 수직 또는 수평과 수직 방향으로 스케일링 가능하다. The scaler 20 is for adjusting the size of the received image, and can be scaled vertically or horizontally and vertically.
프레임 메모리는 수신한 영상신호를 저장하고, 스케일러(20)가 스케일링한 데이터를 일시적으로 저장할 수 있다. The frame memory may store the received image signal and temporarily store data scaled by the scaler 20.
전경검출부(30)는 프레임 메모리에 저장된 스케일한 영상데이터에서 전경 영역을 검출한다. 여기서, 전경은 영상 화면 내에서 중요한 부분, 예를 들면 화면의 중심 인물, 사물, 움직이는 객체 등을 포함하는 의미이다. 입력 영상에서 전경 영역을 검출하는 방법은 Histogram 분석을 통해 특정 영역을 추출하거나 컬러분포를 이용하여 검출할 수 있다. 또한, 동영상에서 프레임 별 차영상(Difference of Image) 또는 윤곽선을 이용하여 객체를 검출하거나 기하학적인 에지와 피쳐의 매핑 정보를 추출하여 이에 기초하여 전경 객체를 검출할 수도 있다. 본 발명의 전경검출부(30)는 다양한 전경 검출 알고리즘을 사용하여 전경 또는 전경 영역을 검출할 수 있다. 전경검출부(30)는 전경 검출 알고리즘과 알고리즘을 처리하는 프로세서로 구현 가능하다.The foreground detection unit 30 detects a foreground region from the scaled image data stored in the frame memory. Here, the foreground refers to an important part in the image screen, for example, a central person, an object, a moving object, etc. of the screen. A method of detecting a foreground area in an input image can be detected by extracting a specific area through a histogram analysis or by using a color distribution. In addition, an object may be detected using a frame-by-frame difference of image or an outline, or geometrical edge-to-feature mapping information may be extracted, and a foreground object may be detected based on this. The foreground detection unit 30 of the present invention may detect a foreground or a foreground region using various foreground detection algorithms. The foreground detection unit 30 can be implemented with a foreground detection algorithm and a processor that processes the algorithm.
전경처리부(31)는 전경 영역의 영상에 대한 입체감 증강 처리를 위한 것으로, 화질처리를 위한 알고리즘 및 알고리즘을 실행하기 위한 프로세서를 포함하여 구현된다. 전경처리부(31)는 전경검출부(30)로부터 전경영역의 위치와 사이즈 정보를 제공받아, 전경영역의 위치와 사이즈에 대응하는 전경 영상의 콘트라스트(Contrast), 노이즈 감소(Noise Reduction), 에지 복원(Edge Restoration), 에지 강조(Edge Enhancement), 감마 보정(γ- correction), 색농도(color), 틴트(tint), 선명도(sharpness) 중 적어도 하나의 화질항목을 조정하여 입체감을 증강시킬 수 있다. 전경처리부(31)의 각 화질 조정 항목에 관한 세팅값은 후술할 제어부(60)에 의해 설정된다.The foreground processing unit 31 is for 3D enhancement processing for an image in the foreground region, and is implemented including an algorithm for image quality processing and a processor for executing the algorithm. The foreground processing unit 31 receives information on the location and size of the foreground area from the foreground detection unit 30, and provides contrast, noise reduction, and edge restoration of the foreground image corresponding to the location and size of the foreground area. Edge Restoration), edge enhancement, gamma correction, color, tint, and sharpness. A setting value for each image quality adjustment item of the foreground processing unit 31 is set by the control unit 60 to be described later.
배경처리부(40)는 영상 프레임에서 전경영역을 제외한 나머지 배경 영역의 영상을 처리하기 위한 것으로, 화질처리를 위한 알고리즘 및 알고리즘을 실행하기 위한 프로세서를 포함하여 구현된다. 여기서, 배경영역은 영상에서 중요도가 떨어지는 예를 들면 뒷 배경, 산, 나무 등을 포함하는 배경 화면을 의미한다. 배경처리부(40)는 전경검출부(30)에서 전경영역에 관한 위치 및 사이즈 정보를 수신하여 전경을 제외한 나머지 배경영역의 영상을 처리한다. 배경처리부(40)는 배경 영역의 영상의 전체적인 휘도 레벨을 감소시킨다. The background processing unit 40 is for processing an image of a background area other than a foreground area in an image frame, and is implemented including an algorithm for image quality processing and a processor for executing the algorithm. Here, the background region refers to a background screen including, for example, a background background, a mountain, a tree, and the like, which are of less importance in the image. The background processing unit 40 receives position and size information on the foreground area from the foreground detection unit 30 and processes the image of the background area other than the foreground. The background processing unit 40 reduces the overall luminance level of the image in the background area.
배경처리부(40)는 배경 영역의 영상에 대해 입력된 영상의 휘도 레벨에 따라 콘트라스트 레벨을 가변하는 다이나믹 콘트라스트 조정부를 포함한다. 다이나믹 콘트라스트 조정부는 배경 영역의 영상에 대한 다이나믹 콘트라스트 조정 시 영상의 전체 휘도레벨을 감소시킨다. 배경처리부(40)의 콘트라스트 조정 항목에 관한 세팅값은 후술할 제어부(60)에 의해 설정된다. 다이나믹 콘트라스트 조정부의 콘트라스트 조정 항목은 감마, 룩업테이블, 백라이트 밝기 등이 될 수 있으며, 배경처리부(40)는 제어부(60)에 의해 설정된 세팅값에 대응하여 배경 영상의 화질을 처리한다. The background processing unit 40 includes a dynamic contrast adjustment unit for varying the contrast level according to the luminance level of the image input with respect to the image in the background area. The dynamic contrast adjustment unit reduces the overall luminance level of the image when adjusting the dynamic contrast of the image in the background area. The setting value for the contrast adjustment item of the background processing unit 40 is set by the control unit 60 to be described later. Contrast adjustment items of the dynamic contrast adjustment unit may be gamma, look-up table, backlight brightness, and the like, and the background processing unit 40 processes the image quality of the background image in response to a setting value set by the control unit 60.
도 2는 배경처리부(40)의 다이나믹 콘트라스트 조정의 일 예를 도시한 것이다. 도 2를 참조하면, 도 2의 (a)는 다이나믹 콘트라스트 조정 항목 중 일반모드, 예컨대 입체감 증강 효과를 처리하지 않는 화질 처리 모드에서 적용되는 감마 커브를 도시한 것이고, 도 2의 (a)는 배경 영상에 적용되는 감마 커브를 도시한 것이다. 도 2에 도시된 바와 같이, 일반모드에서의 감마 커브에서 블랙 해상도는 그대로 유지하면서 전체 휘도레벨을 감소시키도록 게인을 20% 정도 감소시킨다. 이에 따라 배경 영상에서 화면대조비의 효과는 그대로 갖되 전체적인 휘도가 낮아져서 소비전력을 절감하면서도 전경의 입체감 증강 효과를 더욱 높일 수 있다. 도 2에서는 감마 커브를 일 예로 설명하였으나, 콘트라스트 커브나 룩업테이블을 이용하여 휘도 레벨을 감소시키는 경우에도 동일하게 적용될 수 있다. 즉, 블랙 해상도는 그대로 유지하면서 전체 휘도레벨이 낮아지도록 게인을 감소 처리한다. 전술한 배경처리부(40)의 동작은 영상 픽셀 하나 하나의 휘도레벨을 조정할 수 있는 디스플레이 패널(70), 예컨대 OLED 패널에 적용하기 적합한 기술이다. 2 shows an example of dynamic contrast adjustment of the background processing unit 40. Referring to FIG. 2, FIG. 2(a) shows a gamma curve applied in a general mode among dynamic contrast adjustment items, for example, an image quality processing mode that does not process a 3D effect, and FIG. 2(a) is a background It shows a gamma curve applied to an image. As shown in FIG. 2, in the gamma curve in the normal mode, the gain is reduced by about 20% to reduce the total luminance level while maintaining the black resolution. Accordingly, the effect of the screen contrast ratio in the background image remains as it is, but the overall luminance is lowered, thereby reducing power consumption and further enhancing the effect of enhancing the three-dimensional effect of the foreground. In FIG. 2, a gamma curve is described as an example, but the same can be applied to a case where the luminance level is reduced by using a contrast curve or a lookup table. That is, the gain is reduced so that the overall luminance level is lowered while maintaining the black resolution. The operation of the background processing unit 40 described above is a technique suitable for application to the display panel 70, for example, an OLED panel capable of adjusting the luminance level of each image pixel.
합성부(50)는 전경처리부(31)의 영상과 배경처리부(40)의 영상을 합성하여 출력한다. The synthesizing unit 50 synthesizes and outputs the image of the foreground processing unit 31 and the image of the background processing unit 40.
제어부(60)는 사용자 입력 인터페이스부(90)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치의 전반적인 제어를 담당한다. 제어부(60)는 사용자 입력 인터페이스부(90)를 통하여 수신한 영상 재생 명령에 따라, 신호수신부(10)로부터의 영상신호에서 전경과 배경을 분리 처리하여 입체감을 증강 처리하여 디스플레이 패널(70)을 통해 출력될 수 있도록 제어한다. The control unit 60 is in charge of overall control of the image display device according to a user command or an internal program input through the user input interface unit 90. The control unit 60 separates the foreground and the background from the image signal from the signal receiving unit 10 in accordance with the image reproduction command received through the user input interface unit 90 to enhance a three-dimensional effect to display the display panel 70. Control so that it can be output through.
전술한 바와 같이, 제어부(60)는 전경처리부(31) 및 배경처리부(40)의 화질항목 및 화질항목 조정값을 설정하여 전경 영상의 입체감 증강 및 배경 영상의 전체 휘도레벨을 감소시켜, 합성된 영상에서 전경이 더욱 두드러지게 보일 수 있도록 하는 한편, 소비전력을 효과적으로 감소시킬 수 있다. As described above, the control unit 60 sets the image quality item and the image quality item adjustment value of the foreground processing unit 31 and the background processing unit 40 to enhance the 3D effect of the foreground image and reduce the total luminance level of the background image, While making the foreground appear more prominent in the image, power consumption can be effectively reduced.
제어부(60)는 신호 처리 및 제어를 위한 프로그램 코드 및 이를 저장하는 메모리(미도시), 및 이를 실행하는 프로세서(미도시)를 포함하여 구현될 수 있다. 메모리(미도시)는 각 신호 처리 및 제어를 위한 프로그램이 저장될 수 있고, 영상표시장치의 다양한 OS, 미들웨어, 플랫폼, 및 각종 어플케이션을 저장할 수 있다. The controller 60 may be implemented by including a program code for signal processing and control, a memory (not shown) for storing the same, and a processor (not shown) for executing the same. The memory (not shown) may store programs for processing and controlling each signal, and may store various OSs, middleware, platforms, and various applications of the image display device.
본 실시예에 따른 영상표시장치는 패널구동제어부(80) 및 디스플레이 패널(70), 및 사용자 입력 인터페이스부(90)를 더 포함하다. The image display device according to the present exemplary embodiment further includes a panel drive control unit 80, a display panel 70, and a user input interface unit 90.
디스플레이 패널(70)은 영상을 화면에 표시하기 위한 것으로, 액정 디스플레이(LCD, Liquid Crystal Display) 패널, 발광 다이오드(LED, Light Emitting Diode) 패널, 유기 발광 다이오드(OLED, Organic Light Emitting Diode) 패널 등으로 구현될 수 있다. 본 발명에 따른 디스플레이 패널(70)은 디스플레이 모듈, 디스플레이 모듈을 구동하는 디스플레이 구동부를 포함한다. The display panel 70 is for displaying an image on a screen, such as a liquid crystal display (LCD) panel, a light emitting diode (LED) panel, an organic light emitting diode (OLED) panel, etc. It can be implemented as The display panel 70 according to the present invention includes a display module and a display driver driving the display module.
패널구동제어부(80)는 디스플레이 패널(70) 구동을 제어하기 위한 것으로, 합성부(50)를 통해 출력된 영상신호를 디스플레이 패널(70)에 맞는 형식으로 변환하여 출력하고 화이트 밸런스 및 감마 조정과 타이밍 제어를 통해 디스플레이 패널(70)의 구동을 제어한다. 전술한 배경처리부(40)에서 감마값 조정에 의해 배경 영상의 휘도레벨을 감소시키는 경우, 패널구동제어부(80)는 조정된 감마값을 제공받아 영상의 감마값을 조정한다. The panel drive control unit 80 is for controlling the driving of the display panel 70, converts the image signal output through the synthesis unit 50 into a format suitable for the display panel 70 and outputs it, and adjusts the white balance and gamma. The driving of the display panel 70 is controlled through timing control. When the background processing unit 40 reduces the luminance level of the background image by adjusting the gamma value, the panel drive control unit 80 receives the adjusted gamma value and adjusts the gamma value of the image.
사용자 입력 인터페이스부(90)는 사용자가 입력한 신호를 제어부(60)로 전달하거나, 제어부(60)로부터의 신호를 원격제어장치(200)로 전달하기 위한 것으로, 원격제어장치(200)와의 통신을 위한 통신모듈을 포함할 수 있다. 예를 들어, 사용자 입력 인터페이스부(90)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화질 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(60)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있는 통신모듈을 포함할 수 있다.The user input interface unit 90 is for transmitting a signal input by a user to the control unit 60 or for transmitting a signal from the control unit 60 to the remote control device 200, and communicates with the remote control device 200. It may include a communication module for. For example, the user input interface unit 90 can be remotely configured according to various communication methods such as Bluetooth, WB (Ultra Wideband), ZigBee, RF (Radio Frequency) communication method, or infrared (IR) communication method. A communication module capable of receiving and processing control signals such as power on/off, channel selection, and image quality setting from the control device 200 or to transmit a control signal from the control unit 60 to the remote control device 200 It may include.
제어부(60)는 전경 영역과 배경 영역의 분리 및 입체감 증강 처리에 관한 사용자 입력을 받기 위한 UI메뉴를 생성하는 UI생성부(61)를 포함한다. UI메뉴는 전경 영역의 영상에 관한 입체감 증강에 관한 깊이강도를 선택할 수 있는 메뉴항목을 포함한다. 제어부(60)는 사용자 입력 인터페이스부(90)를 통해 선택된 깊이강도에 대응하여 전경처리부(31) 및 배경처리부(40)의 화질 처리에 관한 세팅값을 조정한다. The control unit 60 includes a UI generation unit 61 that generates a UI menu for receiving a user input regarding separation of a foreground area and a background area and a three-dimensional effect enhancement process. The UI menu includes a menu item for selecting a depth intensity for enhancing a three-dimensional effect on an image in the foreground area. The control unit 60 adjusts setting values for image quality processing of the foreground processing unit 31 and the background processing unit 40 in response to the depth intensity selected through the user input interface unit 90.
이와 같이, 본 발명은 전경을 검출하여 전경 영역의 영상은 별도의 입체감 증강 처리를 하고, 배경 영상은 게인을 감소시켜 전체 휘도 레벨을 감소처리함으로써 전경 영상이 더욱 입체감이 증대되도록 하는 한편, 디스플레이 패널(70)의 소비전력을 줄일 수 있다. In this way, the present invention detects the foreground and performs a separate 3D effect enhancement process for the image in the foreground area, and reduces the overall luminance level by reducing the gain for the background image so that the foreground image further increases the 3D effect, while the display panel The power consumption of 70 can be reduced.
이하에서는 도 3 및 도 4를 참조하여, 본 발명의 일 실시예에 따른 영상표시장치에서 입체감 증강 효과를 선택 및 조정하기 위한 방법을 설명하기로 한다. 도 3은 본 발명의 일 실시예에 따른 영상표시장치에서 화질처리모드를 설정하는 방법을 설명하기 위한 흐름도이다. 도 3을 참조하면, 사용자가 화질처리모드에 관한 메뉴를 선택하면(S10), 제어부(60)는 화질처리모드에 관한 UI메뉴를 생성하여 디스플레이 패널(70)에 표시되도록 제어한다(S11). 도 4는 본 발명의 일 실시예에 따른 영상표시장치의 화질처리모드에 관한 UI메뉴의 일 예를 도시한 것이다. 도 4의 (a)는 본 발명에 따른 전경 및 배경 분리 및 입체감 증강 처리에 관한 전경검출모드, 즉, 3D효과모드를 선택할 수 있는 UI메뉴(61a)를 화면에 표시한 것으로, '3D Effect' 로 표현되어 있다.Hereinafter, a method for selecting and adjusting a 3D effect in the image display device according to an exemplary embodiment will be described with reference to FIGS. 3 and 4. 3 is a flowchart illustrating a method of setting an image quality processing mode in an image display device according to an embodiment of the present invention. Referring to FIG. 3, when the user selects a menu related to the image quality processing mode (S10), the controller 60 generates a UI menu related to the image quality processing mode and controls it to be displayed on the display panel 70 (S11). 4 illustrates an example of a UI menu related to an image quality processing mode of an image display device according to an embodiment of the present invention. FIG. 4A shows a foreground detection mode related to the foreground and background separation and 3D effect enhancement processing according to the present invention, that is, a UI menu 61a for selecting a 3D effect mode on the screen. It is expressed as.
사용자가 3D 효과 모드 즉, 전경검출모드를 선택하면(S12), 제어부(60)는 입체감의 깊이 강도를 선택할 수 있는 UI메뉴를 생성하여 디스플레이 패널(70)에 표시되도록 제어한다(S13). 도 4의 (b)는 3D 효과 모드에서 입체감의 깊이 강도를 선택할 수 있는 UI메뉴(61b)를 화면에 표시한 것으로, 깊이 강도가 '상, 중, 하' 3단계의 레벨로 구분되어 있다. When the user selects the 3D effect mode, that is, the foreground detection mode (S12), the controller 60 generates a UI menu for selecting the depth intensity of the three-dimensional effect and controls it to be displayed on the display panel 70 (S13). 4B shows a UI menu 61b for selecting the depth intensity of a three-dimensional effect in the 3D effect mode, and the depth intensity is divided into three levels of'up, middle, and bottom'.
사용자가 '상, 중, 하' 중 어느 하나를 선택하면, 제어부(60)는 사용자의 선택에 대응하는 입체감의 깊이 강도로 화질이 처리될 수 있도록 전경처리부(31) 및 배경처리부(40)의 화질항목의 값들을 설정한다(S14). 제어부(60)는 입체감의 깊이 강도에 따른 화질조정항목 및 조정값 등을 미리 데이터테이블로 구축하고, 이에 대응하여 화질항목을 세팅하여 전경처리부(31) 및 배경처리부(40)의 화질처리를 제어할 수 있다.When the user selects any one of'upper, middle, and lower', the control unit 60 includes the foreground processing unit 31 and the background processing unit 40 so that image quality can be processed with a depth intensity of a three-dimensional effect corresponding to the user's selection. Values of the quality items are set (S14). The control unit 60 controls the image quality processing of the foreground processing unit 31 and the background processing unit 40 by establishing the image quality adjustment items and adjustment values according to the depth of the three-dimensional effect as a data table in advance, and setting the image quality items in response thereto. can do.
본 발명에 따른 영상표시장치는 사용자에 의해 설정된 입체감의 깊이 강도에 따라 전경처리부(31)의 입체감 증강 처리에 관한 강도뿐만 아니라 배경영역의 영상의 휘도레벨의 감소값도 조정되도록 할 수 있다. 예컨대, 입체감의 깊이 강도가 '상'으로 설정되면 전경 영상이 더욱 두드러지도록 배경 영역의 영상의 휘도 레벨을 감소폭을 더욱 크게 조정할 수 있다. The image display device according to the present invention may adjust not only the intensity related to the 3D enhancement processing by the foreground processing unit 31 but also a reduction value of the luminance level of the image in the background region according to the depth intensity of the 3D effect set by the user. For example, if the depth intensity of the three-dimensional effect is set to'image', the luminance level of the image in the background area can be further adjusted to be larger so that the foreground image becomes more prominent.
이하에서는 도 5 및 도 6을 참조하여, 본 발명의 일 실시예에 따른 영상표시장치의 영상처리방법에 대해 설명하기로 하다. 도 5는 본 발명의 일 실시예에 따른 영상표시장치의 영상처리방법을 나타내는 흐름도이고, 도 6은 도 5의 영상처리방법을 도식적으로 설명하기 위한 도면이다.Hereinafter, an image processing method of an image display device according to an exemplary embodiment will be described with reference to FIGS. 5 and 6. 5 is a flowchart illustrating an image processing method of an image display device according to an embodiment of the present invention, and FIG. 6 is a diagram schematically illustrating the image processing method of FIG. 5.
도 5를 참조하면, 영상표시장치에서 영상 재생 시, 제어부(60)는 화질처리모드에서 3D 효과모드 즉, 전경검출모드가 설정되어 있는지 확인한다(S20). 만약, 3D 효과 모드가 설정된 경우, 제어부(60)는 설정된 깊이 강도를 확인하여 전경검출부(30), 전경처리부(31), 및 배경처리부(40)가 3D 효과 모드로 동작하도록 제어한다. 전경검출부(30)는 입력된 영상에서 전경 영역을 검출하고(S21), 전경 영역에 관한 위치 정보 및 크기 정보를 전경처리부(31)로 제공한다. 전경검출부(30)는 제어부(60)에 의해 설정된 깊이 강도에 따른 화질항목 및 화질조정값에 대응하여 전경영역의 영상의 입체감 증강 처리를 수행한다(S22).Referring to FIG. 5, when an image is reproduced in an image display device, the controller 60 checks whether a 3D effect mode, that is, a foreground detection mode, is set in the image quality processing mode (S20). If the 3D effect mode is set, the control unit 60 checks the set depth intensity and controls the foreground detection unit 30, the foreground processing unit 31, and the background processing unit 40 to operate in the 3D effect mode. The foreground detection unit 30 detects a foreground area from the input image (S21), and provides location information and size information about the foreground area to the foreground processing unit 31. The foreground detection unit 30 performs a three-dimensional effect enhancement processing of the image in the foreground region in response to the image quality item and the image quality adjustment value according to the depth intensity set by the control unit 60 (S22).
한편, 배경처리부(40)는 전경영역 이외의 배경영역의 영상을 제어부(60)에 의해 설정된 동적 명암비 즉, 다이나믹 콘트라스트 게인을 감소시켜 블랙 해상도는 유지하면서도 전체 휘도 레벨을 감소시킨다(S23).On the other hand, the background processing unit 40 reduces the dynamic contrast ratio, that is, the dynamic contrast gain set by the control unit 60 for the image of the background area other than the foreground area, thereby reducing the total luminance level while maintaining the black resolution (S23).
합성부(50)는 전경처리부(31)로부터 출력되는 전경 영상과 배경처리부(40)로부터 출력되는 배경 영상을 합성하여 출력한다(S24). 패널구동제어부(80)는 합성부(50)에서 출력되는 영상을 디스플레이 패널(70)의 표시 형식에 맞게 변환하고, 전경처리부(31) 및 배경처리부(40)에서 산출한 값에 의해 감마 조정 등을 수행하여 디스플레이 패널(70)에 표시되도록 한다(S25). The synthesizing unit 50 synthesizes and outputs the foreground image output from the foreground processing unit 31 and the background image output from the background processing unit 40 (S24). The panel drive control unit 80 converts the image output from the synthesis unit 50 according to the display format of the display panel 70, and adjusts gamma according to the values calculated by the foreground processing unit 31 and the background processing unit 40. To be displayed on the display panel 70 (S25).
도 6을 참조하면, 도 6의 (a)는 영상표시장치에 입력된 입력영상을 도시한 것이고, 도 6의 (b)는 전경처리부(31)에서 처리한 전경영역의 영상을 도시한 것이다. 도 6의 (a)에서 움직임이 있는 새와 물체를 전경으로 검출하여 입체감을 증강 처리한 것을 확인할 수 있다. 도 6의 (c)는 배경처리부(40)에서 배경영역의 영상의 전체 휘도레벨을 감소 처리한 것을 확인할 수 있다. 도 6의 (d)는 합성부(50)에 의해 합성되어 디스플레이 패널(70)에 표시된 화면을 도시한 것으로, 전체적으로 전경의 입체감이 두드러지게 표현되어 입체감이 증강된 것을 확인할 수 있다. Referring to FIG. 6, FIG. 6A shows an input image input to an image display device, and FIG. 6B shows an image of a foreground area processed by the foreground processing unit 31. In Fig. 6A, it can be seen that a three-dimensional effect is augmented by detecting a moving bird and an object as a foreground. 6C shows that the background processing unit 40 reduces the total luminance level of the image in the background region. FIG. 6D shows a screen synthesized by the combining unit 50 and displayed on the display panel 70. As a whole, it can be seen that the three-dimensional effect of the foreground is remarkably expressed and the three-dimensional effect is enhanced.
전술한 실시예에서, 배경처리부(40)가 전경영역을 제외한 나머지 배경영역의 영상을 처리하는 것으로 설명하였으나, 도 6에서는 배경처리부(40)가 전경영역을 포함한 프레임 전체의 영상을 처리한 것을 확인할 수 있다. 합성부(50)에 의해 전경 영상과 합성되므로 배경처리부(40)가 배경영상만 처리하는 것과 전체 영상을 처리하는 것은 출력영상에 있어서는 차이가 없다. 따라서, 배경을 분리 처리하는 것보다 전체 영상을 처리하는 것이 오히려 더 쉽고 빠른 경우, 도 6에서와 같이 배경처리부(40)가 전체 영상을 처리해도 무방하다.In the above-described embodiment, it has been described that the background processing unit 40 processes the image of the background area other than the foreground area, but in FIG. 6, it is confirmed that the background processing unit 40 has processed the image of the entire frame including the foreground area. I can. Since the synthesis unit 50 synthesizes the foreground image and the background processing unit 40 processes only the background image and the entire image, there is no difference in the output image. Therefore, if it is easier and faster to process the entire image than to separate the background, the background processing unit 40 may process the entire image as shown in FIG. 6.
이하에서는 도 7 및 도 8을 참조하여 본 발명의 다른 실시예에 따른 영상표시장치와 이의 영상처리방법을 설명하기로 한다. LCD 패널과 같이 백라이트 모듈(75)에 의해 밝기를 조정하는 영상표시장치는 각각의 화소별 밝기를 조정하기 어려우므로, 전한 실시예와는 다른 방법으로 영상의 입체감을 증강시킬 수 있다.Hereinafter, an image display device and an image processing method thereof according to another exemplary embodiment of the present invention will be described with reference to FIGS. 7 and 8. Since it is difficult to adjust the brightness of each pixel in an image display device such as an LCD panel that adjusts the brightness by the backlight module 75, it is possible to enhance the three-dimensional effect of the image in a different way from the previous embodiment.
도 7은 본 발명의 다른 실시예에 따른 영상표시장치의 제어블록도이다. 본 실시예에 따른 영상표시장치는 신호수신부(10), 스케일러(20), 프레임메모리(21), 전경검출부(30), 전경처리부(31), 배경처리부(40), 합성부(50), 제어부(60), 사용자 입력 인터페이스부(90), 디스플레이 패널(70), 및 패널구동제어부(80)를 포함한다. 전술한 실시예와 중복되는 설명은 필요에 따라 생략하기로 하며, 전술한 실시예와 차이가 있는 부분을 중심으로 설명하기로 한. 또한, 도 7에서 신호수신부(10)와 사용자 입력 인터페이스부(90) 등 일부 구성을 생략하여 도시하였으나 이는 설명의 편의를 위해 생략하였다. 본 실시예에서 신호수신부(10), 스케일러(20), 프레임메모리(21), 전경검출부(30), 전경처리부(31), 합성부(50), 패널구동제어부(80), 사용자 입력 인터페이스부(90) 등의 동작은 전술한 실시예와 동일 유사하므로 구체적인 설명은 전술한 설명으로 대체한다.7 is a control block diagram of an image display device according to another embodiment of the present invention. The image display device according to the present embodiment includes a signal receiving unit 10, a scaler 20, a frame memory 21, a foreground detecting unit 30, a foreground processing unit 31, a background processing unit 40, a synthesizing unit 50, and A control unit 60, a user input interface unit 90, a display panel 70, and a panel drive control unit 80 are included. Descriptions overlapping with the above-described embodiments will be omitted as necessary, and a description will be made focusing on the differences from the above-described embodiments. In addition, some components such as the signal receiving unit 10 and the user input interface unit 90 are omitted in FIG. 7, but these are omitted for convenience of description. In this embodiment, the signal receiving unit 10, the scaler 20, the frame memory 21, the foreground detection unit 30, the foreground processing unit 31, the synthesis unit 50, the panel drive control unit 80, the user input interface unit Since the operation of (90) is the same as that of the above-described embodiment, the detailed description is replaced with the above description.
디스플레이 패널(70)은 디스플레이 모듈(71), 디스플레이 모듈(71)을 구동하는 디스플레이 구동부(73), 디스플레이 모듈(71)에 광을 조사하는 복수의 백라이트 모듈(75), 및 백라이트 모듈(75)을 구동하는 백라이트 구동부(77)를 포함한다. 백라이트 모듈(75)은 냉음극형광램프(CCFL; Cold Cathode Fluorescent Lamp), 발광다이오드(Light Emitting Diode: LED) 램프 등이 사용될 수 있으며, 백라이트 구동부(77)는 백라이트 모듈(75)의 턴-온/오프를 제어한다. 본 발명에서는 백라이트 모듈(75)이 LED 램프로 마련되며, 백라이트를 다수의 블록으로 분할하고 블록별로 디밍값을 조절할 수 있다. 도 7에서는 다수의 블록에 대응하는 백라이트 모듈(75)을 복수개로 표현하였다. The display panel 70 includes a display module 71, a display driver 73 for driving the display module 71, a plurality of backlight modules 75 for irradiating light to the display module 71, and a backlight module 75 It includes a backlight driver 77 for driving. The backlight module 75 may be a Cold Cathode Fluorescent Lamp (CCFL), a Light Emitting Diode (LED) lamp, and the like, and the backlight driver 77 is a turn-on of the backlight module 75. Controls /off. In the present invention, the backlight module 75 is provided with an LED lamp, and the backlight can be divided into a plurality of blocks and a dimming value can be adjusted for each block. In FIG. 7, a plurality of backlight modules 75 corresponding to a plurality of blocks are represented.
제어부(60)는 백라이트 유닛의 디밍에 관한 펄스폭변조(Pulse Width Modulation)제어를 수행하는 PWM 제어부(63)를 포함한다. LCD 디스플레이 패널(70)의 특성상 각 화소별 밝기를 제어하기 어려우므로, 전경검출부(30)에서 검출한 전경영역의 영상에 대해서는 입체감 강화 처리를 수행하되, 배경영역에 대해서는 백라이트 로컬 디밍을 통해 휘도 레벨을 감소시킨다. The control unit 60 includes a PWM control unit 63 that performs Pulse Width Modulation control related to dimming of the backlight unit. Because it is difficult to control the brightness of each pixel due to the characteristics of the LCD display panel 70, the image in the foreground region detected by the foreground detection unit 30 is subjected to a three-dimensional effect enhancement process, but the background region is subjected to backlight local dimming. Decrease.
구체적으로, 제어부(60)는 전경검출부(30)로부터 전경영역의 위치 및 크기에 관한 정보를 전달받고, 해당 배경 영역에 대응하는 백라이트의 밝기가 감소되도록 백라이트 구동부(77)에 로컬 디밍제어신호를 출력한다. PWM 제어부(63)는 로컬디밍 PWM 신호의 듀티 사이클을 감소하거나 주파수를 제어함으로써 밝기를 감소시킬 수 있다. Specifically, the control unit 60 receives information on the location and size of the foreground area from the foreground detection unit 30, and transmits a local dimming control signal to the backlight driver 77 so that the brightness of the backlight corresponding to the background area is reduced. Print it out. The PWM control unit 63 may reduce the brightness by reducing the duty cycle of the local dimming PWM signal or controlling the frequency.
PWM 제어부(63)는 배경 영역에 대응하는 백라이트 모듈(75)의 밝기를 기존의 레벨에서 20~50% 감소시키는 디밍제어신호를 출력하도록 설정될 수 있다. 또한, 사용자에 의해 설정된 입체감의 깊이 강도에 따라 배경영역의 영상의 휘도레벨의 감소값도 조정될 수 있다. 예컨대, 입체감의 깊이 강도가 '상'으로 설정되면 전경 영상이 더욱 두드러지도록 배경 영역의 영상의 휘도 레벨을 감소폭을 더욱 크게 조정할 수 있다.The PWM control unit 63 may be set to output a dimming control signal that reduces the brightness of the backlight module 75 corresponding to the background area by 20 to 50% from the existing level. In addition, the reduction value of the luminance level of the image in the background area may be adjusted according to the depth intensity of the three-dimensional effect set by the user. For example, if the depth intensity of the three-dimensional effect is set to'image', the luminance level of the image in the background area can be further adjusted to be larger so that the foreground image becomes more prominent.
도 8은 도 7의 영상표시장치의 영상처리방법을 나타내는 흐름도이다. 도 8을 참조하면, 영상표시장치에서 영상 재생 시, 제어부(60)는 화질처리모드에서 3D 효과 모드, 즉 전경검출모드가 설정되어 있는지 확인한다(S30). 만약, 3D 효과 모드가 설정된 경우, 제어부(60)는 설정된 깊이 강도를 확인하여 전경검출부(30), 전경처리부(31), 및 배경처리부(40)가 3D 효과 모드로 동작하도록 제어한다. 구체적으로, 전경검출부(30)는 입력된 영상에서 전경 영역을 검출하고(S31), 전경 영역에 관한 위치 정보 및 크기 정보를 전경처리부(31)로 제공한다. 전경검출부(30)는 제어부(60)에 의해 설정된 깊이 강도에 따른 화질항목 및 화질조정값에 대응하여 전경영역의 영상의 입체감 증강 처리를 수행한다(S32).8 is a flowchart illustrating an image processing method of the image display device of FIG. 7. Referring to FIG. 8, when reproducing an image in an image display device, the controller 60 checks whether a 3D effect mode, that is, a foreground detection mode, is set in the image quality processing mode (S30). If the 3D effect mode is set, the control unit 60 checks the set depth intensity and controls the foreground detection unit 30, the foreground processing unit 31, and the background processing unit 40 to operate in the 3D effect mode. Specifically, the foreground detection unit 30 detects a foreground area from the input image (S31), and provides location information and size information about the foreground area to the foreground processing unit 31. The foreground detection unit 30 performs a three-dimensional effect enhancement processing of the image in the foreground region in response to the image quality item and the image quality adjustment value according to the depth intensity set by the control unit 60 (S32).
한편, 배경처리부(40)는 전경영역 이외의 배경영역의 영상 또는 전체 영상을 일반적인 모드로 처리한다(S33).Meanwhile, the background processing unit 40 processes an image or an entire image of a background region other than the foreground region in a general mode (S33).
합성부(50)는 전경처리부(31)로부터 출력되는 전경 영상과 배경처리부(40)로부터 출력되는 배경 영상을 합성하여 출력한다(S34). 제어부(60)는 전경영역에 관한 위치 및 크기 정보를 전달받아 해당 배경 영역에 대응하는 백라이트 모듈(75)의 밝기를 감소시키도록 디밍제어신호를 출력한다(S35). 패널구동제어부(80)는 합성부(50)에서 출력되는 영상을 디스플레이 패널(70)의 표시 형식에 맞게 변환하여 디스플레이 모듈(71)에 표시되도록 한다(S36). 이때, 제어부(60)는 전경 영역의 영상에 대한 밝기를 더욱 밝게 하도록 제어할 수도 있다. The synthesizing unit 50 synthesizes and outputs the foreground image output from the foreground processing unit 31 and the background image output from the background processing unit 40 (S34). The controller 60 receives position and size information about the foreground area and outputs a dimming control signal to reduce the brightness of the backlight module 75 corresponding to the background area (S35). The panel drive control unit 80 converts the image output from the synthesis unit 50 according to the display format of the display panel 70 to be displayed on the display module 71 (S36). In this case, the controller 60 may control the brightness of the image in the foreground area to be brighter.
이와 같이, 본 발명에 따른 영상표시장치는 전경과 배경을 분리하고, 전경은 입체감을 강화하는 처리를 하는 대신, 배경 영역의 영상은 밝기를 감소시킴으로써 전체 영상에서 전경 영상의 입체감이 더욱 두드러지면서도 디스플레이 패널(70)의 소비전력을 감소시킬 수 있다. In this way, the image display device according to the present invention separates the foreground and the background, and instead of performing a process to enhance a three-dimensional effect in the foreground, the image in the background area decreases the brightness, so that the three-dimensional effect of the foreground image is more prominent in the entire image The power consumption of the display panel 70 can be reduced.
한편, 본 발명의 영상표시장치의 동작방법은, 영상표시장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the method of operating an image display device of the present invention may be implemented as a code that can be read by a processor on a recording medium that can be read by a processor provided in the image display device. The processor-readable recording medium includes all types of recording devices that store data that can be read by the processor. Examples of recording media that can be read by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc., and also include those implemented in the form of carrier waves such as transmission through the Internet. . In addition, the recording medium readable by the processor may be distributed over a computer system connected through a network, so that code readable by the processor may be stored and executed in a distributed manner.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiments of the present invention have been illustrated and described above, the present invention is not limited to the specific embodiments described above, and the technical field to which the present invention belongs without departing from the gist of the present invention claimed in the claims. In addition, various modifications are possible by those of ordinary skill in the art, and these modifications should not be understood individually from the technical spirit or prospect of the present invention.

Claims (15)

  1. 영상표시장치에 있어서,In the image display device,
    입력된 영상에서 전경 영역을 검출하는 전경검출부;A foreground detection unit that detects a foreground region from the input image;
    상기 전경 영역의 영상에 대해 입체감을 증강처리하는 전경처리부;A foreground processing unit that enhances a three-dimensional effect on the image of the foreground region;
    상기 전경 영역을 제외한 배경 영역의 영상을 처리하는 배경처리부; A background processing unit that processes an image of a background area excluding the foreground area;
    상기 전경 영역의 영상과 상기 배경 영역의 영상을 합성하는 합성부; 및A synthesizing unit for synthesizing the image of the foreground region and the image of the background region; And
    상기 전경처리부 및 상기 배경처리부의 화질 처리를 제어하는 제어부를 포함하는 것을 특징으로 하는 영상표시장치. And a control unit for controlling image quality processing of the foreground processing unit and the background processing unit.
  2. 제1항에 있어서,The method of claim 1,
    상기 제어부는 배경처리부가 상기 배경 영역의 영상의 휘도 레벨을 감소시키도록 제어하는 것을 특징으로 하는 영상표시장치. Wherein the control unit controls the background processing unit to decrease the luminance level of the image in the background area.
  3. 제2항에 있어서,The method of claim 2,
    상기 배경처리부는 상기 배경 영역의 영상에 대해 배경처리부는 상기 입력된 영상의 휘도 레벨에 따라 콘트라스트 레벨을 가변하는 다이나믹 콘트라스트 조정부를 포함하고;The background processing unit includes a dynamic contrast adjustment unit for varying the contrast level according to the luminance level of the input image with respect to the image in the background area;
    상기 제어부는 상기 다이나믹 콘트라스트 조정부가 상기 배경 영역의 영상에 대한 다이나믹 콘트라스트 조정 시 휘도레벨을 감소시키도록 제어하는 것을 특징으로 하는 영상표시장치. Wherein the control unit controls the dynamic contrast adjustment unit to decrease a luminance level when adjusting the dynamic contrast of the image in the background area.
  4. 제3항에 있어서,The method of claim 3,
    상기 배경처리부는 상기 배경 영역의 영상에 대해 배경처리부는 상기 입력된 영상의 휘도 레벨에 따라 콘트라스트 레벨을 가변하는 다이나믹 콘트라스트 조정부를 포함하고;The background processing unit includes a dynamic contrast adjustment unit for varying the contrast level according to the luminance level of the input image with respect to the image in the background area;
    상기 제어부는 상기 다이나믹 콘트라스트 조정부가 상기 배경 영역의 영상에 대한 다이나믹 콘트라스트 조정 시, 콘트라스트 조정 커브의 블랙 해상도는 유지하면서 전체 레벨을 감소시키도록 제어하는 것을 특징으로 하는 영상표시장치. Wherein when the dynamic contrast adjustment unit adjusts the dynamic contrast of the image in the background area, the controller controls the overall level to be reduced while maintaining the black resolution of the contrast adjustment curve.
  5. 제3항에 있어서,The method of claim 3,
    상기 다이나믹 콘트라스트 조정부는 감마 커브 또는 룩업테이블에 기초하여 콘트라스트 레벨을 가변처리하고; The dynamic contrast adjustment unit variably processes a contrast level based on a gamma curve or a lookup table;
    상기 제어부는 상기 다이나믹 콘트라스트 조정부가 상기 배경 영역의 영상에 대한 콘트라스트 조정 시 게인을 감소시키도록 제어하는 것을 특징으로 하는 영상표시장치. And the control unit controls the dynamic contrast adjustment unit to reduce a gain when adjusting the contrast of the image in the background area.
  6. 제5항에 있어서,The method of claim 5,
    영상을 표시하는 디스플레이 패널; 및A display panel that displays an image; And
    상기 합성부에서 출력되는 영상을 변환하여 상기 디스플레이 패널에 표시되도록 제어하는 패널구동제어부를 더 포함하고;A panel driving control unit for converting the image output from the synthesizing unit to be displayed on the display panel;
    상기 패널구동제어부는 상기 다이나믹 콘트라스트 조정부에서 조정된 감마값에 따라 상기 디스플레이 패널을 구동 제어하는 것을 특징으로 하는 영상표시장치.And the panel driving control unit driving and controlling the display panel according to a gamma value adjusted by the dynamic contrast adjustment unit.
  7. 제1항에 있어서,The method of claim 1,
    상기 영상을 화면에 표시하는 디스플레이 모듈;A display module displaying the image on a screen;
    상기 디스플레이 모듈을 구동하는 디스플레이 구동부;A display driver driving the display module;
    상기 디스플레이 모듈에 광을 조사하는 복수의 백라이트 모듈; 및A plurality of backlight modules irradiating light to the display module; And
    상기 복수의 백라이트 모듈을 구동하는 백라이트 구동부를 더 포함하고;Further comprising a backlight driver for driving the plurality of backlight modules;
    상기 제어부는 상기 백라이트 구동부의 밝기를 조절하는 PWM(Pulse Width Modulation) 제어부를 포함하며, 상기 PWM 제어부는 상기 배경 영역에 대응하는 백라이트 모듈의 밝기를 감소시키는 디밍제어신호를 출력하는 것을 특징으로 하는 영상표시장치. The control unit includes a PWM (Pulse Width Modulation) control unit that adjusts the brightness of the backlight driving unit, and the PWM control unit outputs a dimming control signal for reducing the brightness of the backlight module corresponding to the background area. Display device.
  8. 제7항에 있어서,The method of claim 7,
    상기 PWM 제어부는 상기 배경 영역에 대응하는 백라이트 모듈의 밝기를 기존의 레벨에서 15~40% 감소시키는 디밍제어신호를 출력하는 것을 특징으로 하는 영상표시장치. The PWM control unit outputs a dimming control signal for reducing the brightness of the backlight module corresponding to the background area by 15 to 40% from an existing level.
  9. 제1항에 있어서,The method of claim 1,
    상기 제어부는 콘트라스트(Contrast), 노이즈 감소(Noise Reduction), 에지 복원(Edge Restoration), 에지 강조(Edge Enhancement), 감마 보정(γ- correction), 색농도(color), 틴트(tint), 선명도(sharpness) 중 적어도 하나의 화질 항목에 관한 조정값을 설정하여 상기 전경처리부가 상기 전경 영역의 영상에 대해 상기 입체감을 증강 처리하도록 제어하는 것을 특징으로 하는 영상표시장치.The control unit includes contrast, noise reduction, edge restoration, edge enhancement, gamma correction, color, tint, and sharpness ( sharpness) by setting an adjustment value for at least one image quality item, and controlling the foreground processing unit to enhance the three-dimensional effect on the image in the foreground area.
  10. 제9항에 있어서,The method of claim 9,
    사용자의 입력을 위한 사용자 입력 인터페이스부를 더 포함하고;Further comprising a user input interface unit for user input;
    상기 제어부는 상기 전경 영역과 상기 배경 영역의 분리 처리에 관한 사용자 입력을 받기 위한 UI메뉴를 생성하는 UI생성부를 포함하며;The control unit includes a UI generating unit for generating a UI menu for receiving a user input regarding separation processing of the foreground area and the background area;
    상기 UI메뉴는 상기 전경 영역의 영상에 관한 입체감 증강에 관한 깊이강도를 선택할 수 있는 메뉴항목을 포함하고;The UI menu includes a menu item for selecting a depth intensity for enhancing a three-dimensional effect for an image in the foreground area;
    상기 제어부는 상기 사용자 입력 인터페이스부를 통해 상기 메뉴항목에서 선택된 깊이강도에 대응하여 상기 전경처리부의 화질 처리에 관한 세팅값을 조정하는 것을 특징으로 하는 영상표시장치.And the control unit adjusts a setting value for image quality processing of the foreground processing unit in response to a depth intensity selected from the menu item through the user input interface unit.
  11. 입력된 영상에서 전경 영역을 검출하는 단계;Detecting a foreground area from the input image;
    상기 전경 영역의 영상에 대한 입체감을 증강 처리하는 단계;Enhancing a three-dimensional effect on the image of the foreground area;
    상기 전경 영역을 제외한 배경 영역의 영상의 휘도레벨을 감소시키는 단계; 및Reducing a luminance level of an image in a background area excluding the foreground area; And
    상기 전경 영역의 영상과 상기 배경 영역의 영상을 합성하는 단계를 포함하는 것을 특징으로 하는 영상표시장치의 영상처리방법. And synthesizing the image of the foreground region and the image of the background region.
  12. 제11항에 있어서,The method of claim 11,
    상기 배경 영역의 영상을 휘도레벨을 감소시키는 단계는, 상기 배경 영역의 영상에 대한 다이나믹 콘트라스트 조정 시 기 설정된 콘트라스트 조정 커브의 블랙 해상도는 유지하면서 전체 레벨을 감소시키는 것을 특징으로 하는 영상표시장치의 영상처리방법. The step of reducing the luminance level of the image in the background area comprises reducing the overall level while maintaining the black resolution of a preset contrast adjustment curve when the dynamic contrast of the image in the background area is adjusted. Treatment method.
  13. 입력된 영상에서 전경 영역을 검출하는 단계;Detecting a foreground area from the input image;
    상기 전경 영역의 영상에 대해 입체감을 증강 처리하는 단계;Enhancing a three-dimensional effect on the image in the foreground area;
    상기 전경 영역을 제외한 배경 영역의 영상을 처리하는 단계; Processing an image of a background area excluding the foreground area;
    상기 전경 영역의 영상과 상기 배경 영역의 영상을 합성하는 단계; 및Synthesizing the image of the foreground area and the image of the background area; And
    상기 배경 영역에 대응하는 백라이트 모듈의 밝기를 감소시키는 디밍제어신호를 출력하는 단계를 포함하는 것을 특징으로 하는 영상표시장치의 영상처리방법.And outputting a dimming control signal for reducing brightness of a backlight module corresponding to the background area.
  14. 제11항 내지 제13항 중 어느 하나의 항에 있어서,The method according to any one of claims 11 to 13,
    상기 전경 영역의 영상을 처리하는 단계는, 콘트라스트(Contrast), 노이즈 감소(Noise Reduction), 에지 복원(Edge Restoration), 에지 강조(Edge Enhancement), 감마 보정(γ- correction), 색농도(color), 틴트(tint), 선명도(sharpness) 중 적어도 하나의 화질 항목을 조정하여 상기 전경 영역의 영상에 대해 입체감을 증강 처리하는 것을 특징으로 하는 영상표시장치의 영상처리방법.The processing of the image of the foreground area may include: Contrast, Noise Reduction, Edge Restoration, Edge Enhancement, gamma correction, and color. , A three-dimensional effect on the image of the foreground region by adjusting at least one of a tint and sharpness.
  15. 제14항에 있어서,The method of claim 14,
    상기 전경 영역의 영상에 관한 입체감 증강 처리에 관한 깊이강도를 선택할 수 있는 UI메뉴를 생성하는 단계; 및Generating a UI menu for selecting a depth intensity for a three-dimensional effect enhancement processing for the image in the foreground area; And
    상기 UI메뉴에서 선택된 깊이강도에 대응하는 상기 전경 영역의 화질 처리에 관한 세팅값을 조정하는 단계를 더 포함하는 것을 특징으로 하는 영상표시장치의 영상처리방법.And adjusting a setting value for image quality processing of the foreground area corresponding to the depth intensity selected in the UI menu.
PCT/KR2019/010941 2019-08-27 2019-08-27 Image display apparatus and image processing method thereof WO2021040075A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/010941 WO2021040075A1 (en) 2019-08-27 2019-08-27 Image display apparatus and image processing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/010941 WO2021040075A1 (en) 2019-08-27 2019-08-27 Image display apparatus and image processing method thereof

Publications (1)

Publication Number Publication Date
WO2021040075A1 true WO2021040075A1 (en) 2021-03-04

Family

ID=74685230

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/010941 WO2021040075A1 (en) 2019-08-27 2019-08-27 Image display apparatus and image processing method thereof

Country Status (1)

Country Link
WO (1) WO2021040075A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100829581B1 (en) * 2006-11-28 2008-05-14 삼성전자주식회사 Image processing method, medium and apparatus
KR20100036015A (en) * 2008-09-29 2010-04-07 김형수 Stereoscopic image creation apparatus
US20140079288A1 (en) * 2012-09-20 2014-03-20 Samsung Electronics Co., Ltd. Apparatus and method for processing color image using depth image
JP6513300B1 (en) * 2018-03-28 2019-05-15 三菱電機株式会社 IMAGE PROCESSING APPARATUS, IMAGE PROCESSING METHOD, AND IMAGE PROCESSING PROGRAM
KR20190059829A (en) * 2017-11-23 2019-05-31 한국전자통신연구원 The Method and Apparatus of Interactive Stereoscopic App Contents Generation for 3D Smart Device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100829581B1 (en) * 2006-11-28 2008-05-14 삼성전자주식회사 Image processing method, medium and apparatus
KR20100036015A (en) * 2008-09-29 2010-04-07 김형수 Stereoscopic image creation apparatus
US20140079288A1 (en) * 2012-09-20 2014-03-20 Samsung Electronics Co., Ltd. Apparatus and method for processing color image using depth image
KR20190059829A (en) * 2017-11-23 2019-05-31 한국전자통신연구원 The Method and Apparatus of Interactive Stereoscopic App Contents Generation for 3D Smart Device
JP6513300B1 (en) * 2018-03-28 2019-05-15 三菱電機株式会社 IMAGE PROCESSING APPARATUS, IMAGE PROCESSING METHOD, AND IMAGE PROCESSING PROGRAM

Similar Documents

Publication Publication Date Title
EP2949120B1 (en) Global display management based light modulation
EP1704726B1 (en) Ambient light derived form video content by mapping transformations through unrendered color space
US8063992B2 (en) Dominant color extraction for ambient light derived from video content mapped through unrendered color space
US9966011B2 (en) TV set, method of controlling backlight of liquid crystal panel and storage medium
US7952645B2 (en) Video processing apparatus and mobile terminal apparatus
EP1704727B1 (en) Flicker-free adaptive thresholding for ambient light derived from video content mapped through unrendered color space
KR101612979B1 (en) Method for adjusting image quality and a display apparatus thereof
WO2012108707A2 (en) Method and apparatus for brightness-controlling image conversion
US20070091111A1 (en) Ambient light derived by subsampling video content and mapped through unrendered color space
EP1986417A1 (en) Method and apparatus for displaying images having wide color gamut
CN114866809B (en) Video conversion method, apparatus, device, storage medium, and program product
WO2021025199A1 (en) Display device and method for controlling same
KR20090041994A (en) Display apparatus and method for image enhancement
CN101075427A (en) Image correction circuit, image correction method and image display
US20100156956A1 (en) Grayscale characteristic for non-crt displays
JP2003228330A (en) Display device
WO2021080395A1 (en) Electronic display board for controlling 4 way dual scanning in which gray scale pixel (gsp) is applied to dynamic image correction technology (dict)
WO2021040075A1 (en) Image display apparatus and image processing method thereof
CN107277475A (en) Laser television image processing method, laser television and computer-readable recording medium
JP5063394B2 (en) Image processing device
CN113870769B (en) Data processing method and system of display screen system
KR19980072902A (en) Color reproduction method and apparatus of image display device
JP5476108B2 (en) Display device
JP5314585B2 (en) Display device
KR101635218B1 (en) Method for adjusting image quality

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19942782

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19942782

Country of ref document: EP

Kind code of ref document: A1