KR20200025481A - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20200025481A
KR20200025481A KR1020180102895A KR20180102895A KR20200025481A KR 20200025481 A KR20200025481 A KR 20200025481A KR 1020180102895 A KR1020180102895 A KR 1020180102895A KR 20180102895 A KR20180102895 A KR 20180102895A KR 20200025481 A KR20200025481 A KR 20200025481A
Authority
KR
South Korea
Prior art keywords
gray
value
gradation
image
area
Prior art date
Application number
KR1020180102895A
Other languages
English (en)
Other versions
KR102558290B1 (ko
Inventor
김봉조
김종호
엄기문
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020180102895A priority Critical patent/KR102558290B1/ko
Priority to EP19186608.6A priority patent/EP3618051B1/en
Priority to PCT/KR2019/009316 priority patent/WO2020045834A1/en
Priority to US16/526,288 priority patent/US10939083B2/en
Publication of KR20200025481A publication Critical patent/KR20200025481A/ko
Application granted granted Critical
Publication of KR102558290B1 publication Critical patent/KR102558290B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H04N9/69—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits for modifying the colour signals by gamma correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/74—Circuits for processing colour signals for obtaining special effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N9/04—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0613—The adjustment depending on the type of the information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

전자 장치가 개시된다. 본 전자 장치는 통신부, 카메라, 레드 영역, 그린 영역 및 블루 영역을 포함하며 각 영역이 상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기준 이미지를 저장하는 메모리 및 기준 이미지를 디스플레이 장치로 전송하도록 통신부를 제어하고, 카메라를 통해, 기준 이미지를 표시하는 디스플레이 장치 및 디스플레이 장치의 배경을 촬영하고, 촬영된 이미지에 포함된 복수의 계조 영역 및 저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 획득된 보정 데이터에 기초하여 촬영된 이미지에서 배경에 대응되는 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 장치로 전송하도록 통신부를 제어하는 프로세서를 포함한다.

Description

전자 장치 및 그 제어 방법 {ELECTRONIC APPARATUS AND THE CONTROL METHOD THEREOF}
본 개시는 전자 장치 및 그 제어 방법에 관한 것으로, 보다 상세하게는 디스플레이 장치로 배경 이미지를 제공하는 전자 장치 및 그 제어 방법에 관한 것이다.
최근 전자 기술의 발달로 다양한 사용자 경험을 제공하는 전자 장치가 개발되고 있다. 특히, 최근에는 도 1에 도시된 바와 같이, 디스플레이 장치의 주변 영역을 촬영하여 획득한 배경 이미지를 표시하는 디스플레이 장치가 개발되고 있다. 이와 같은 디스플레이 장치의 경우, 사용자에게 마치 투명한 유리창을 보는 것과 같은 시각적 효과를 제공할 수 있다.
이러한 시각적 효과를 제공하기 위해서, 종래에는 스마트 폰 등의 카메라를 이용하여 디스플레이 장치 주변 영역을 촬영한 뒤, 촬영된 영상으로부터 획득한 배경 이미지를 디스플레이 장치에 표시하였다.
그런데, 스마트 폰 등의 카메라를 통해 획득한 배경 이미지의 계조 값은, 스마트 폰에 설정된 색 온도, 톤 등에 따라 실제 배경의 계조 값과 상이할 수 있다. 따라서, 종래와 같이 스마트 폰 등의 카메라를 이용하여 획득한 배경 이미지를 디스플레이 장치에 그대로 표시할 경우, 실제 배경과 디스플레이 장치에 보여지는 배경 이미지간 색상 차이가 발생하여 부자연스럽게 보이는 문제가 있다.
본 개시는 상술한 문제점을 해결하기 위해 안출된 것으로, 본 개시의 목적은 실제 배경과 디스플레이 장치에 보여지는 배경 이미지간 색상 차이를 최소화함으로써, 사용자에게 디스플레이 장치가 투명한 유리창처럼 보이는 시각적 효과를 극대화 시켜서 제공함에 있다.
상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 전자 장치는 통신부, 카메라, 상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기준 이미지를 저장하는 메모리 및 상기 카메라를 통해, 상기 기준 이미지가 출력되는 상기 디스플레이 장치 및 상기 디스플레이 장치의 배경을 촬영하고, 상기 촬영된 이미지에 포함된 복수의 계조 영역 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 상기 촬영된 이미지의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 상기 획득된 보정 데이터에 기초하여 상기 촬영된 이미지에서 상기 배경에 대응되는 배경 이미지를 보정하고, 상기 보정된 배경 이미지가 상기 디스플레이 장치에 출력되도록 상기 통신부를 제어하는 프로세서를 포함할 수 있다.
그리고, 상기 프로세서는 상기 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정할 수 있다.
또한, 프로세서는 상기 적어도 하나의 픽셀 각각에 포함된 R, G, B 서브 픽셀에 대응되는 보정 데이터를 획득하고, 상기 획득된 보정 데이터에 기초하여 상기 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정할 수 있다.
그리고, 상기 프로세서는 상기 촬영된 이미지에 포함된 복수의 계조 영역의 계조 값 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득할 수 있다.
한편, 상기 기준 이미지는, 상이한 계조 값을 가지는 복수의 계조 영역을 각각 포함하는 레드 영역, 그린 영역 및 블루 영역으로 구성되고, 프로세서는 상기 촬영된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 상기 촬영된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 G의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 상기 촬영된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 B의 계조 값을 보정하기 위한 보정 데이터를 획득할 수 있다.
그리고, 상기 프로세서는 상기 R에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R 서브 픽셀을 보정하고, 상기 G에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 G 서브 픽셀을 보정하고, 상기 B에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 B 서브 픽셀을 보정할 수 있다.
한편, 상기 레드 영역에 포함된 상기 복수의 계조 영역의 R의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, G 및 B의 계조 값은 서로 동일하며, 상기 그린 영역에 포함된 상기 복수의 계조 영역의 G의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 B의 계조 값은 서로 동일하며, 상기 블루 영역에 포함된 상기 복수의 계조 영역의 B의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 G의 계조 값은 서로 동일할 수 있다.
그리고, 상기 프로세서는 상기 디스플레이 장치 주변의 조도에 기초하여, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 미만일 경우, 기설정된 계조 값 이상의 계조 구간(range)은 제외하고 상기 기설정된 계조 값 미만의 계조 구간만을 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하고, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 이상일 경우, 기설정된 계조 값 미만의 계조 구간은 제외하고 상기 기설정된 계조 값 이상의 계조 구간만을 상기 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성할 수 있다.
또한, 상기 프로세서는 상기 배경 이미지에 포함된 컬러에 기초하여, 레드 영역, 그린 영역 및 블루 영역 중 상기 배경 이미지에 기설정된 비율 이상 포함된 컬러에 대응되는 영역에 포함된 복수의 계조 영역 간의 계조 값 차이가 다른 영역에 포함된 복수의 계조 영역 간의 계조 값보다 작아지도록 상기 기준 이미지를 생성할 수 있다.
그리고, 상기 프로세서는 상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고, 상기 배경 이미지에 그린 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고, 상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성할 수 있다.
한편 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법은, 상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기저장된 기준 이미지를 디스플레이 장치로 전송하는 단계, 상기 기준 이미지가 출력되는 상기 디스플레이 장치 및 상기 디스플레이 장치의 배경을 촬영하는 단계, 상기 촬영된 이미지에 포함된 복수의 계조 영역 및 상기 기저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 상기 촬영된 이미지의 계조 값을 보정하기 위한 보정 데이터를 획득하는 단계, 상기 획득된 보정 데이터에 기초하여 상기 촬영된 이미지에서 상기 배경에 대응되는 배경 이미지를 보정하는 단계 및 상기 보정된 배경 이미지가 상기 디스플레이 장치에 출력되도록 상기 보정된 배경 이미지를 전송하는 단계를 포함할 수 있다.
그리고, 상기 보정하는 단계는 상기 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정할 수 있다.
또한, 상기 보정하는 단계는 상기 적어도 하나의 픽셀 각각에 포함된 R, G, B 서브 픽셀에 대응되는 보정 데이터를 획득하고, 상기 획득된 보정 데이터에 기초하여 상기 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정할 수 있다.
그리고, 상기 보정 데이터를 획득하는 단계는 상기 촬영된 이미지에 포함된 복수의 계조 영역의 계조 값 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득할 수 있다.
한편, 상기 기준 이미지는, 상이한 계조 값을 가지는 복수의 계조 영역을 각각 포함하는 레드 영역, 그린 영역 및 블루 영역으로 구성되고, 상기 보정 데이터를 획득하는 단계는 상기 촬영된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 상기 촬영된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 G의 계조 값을 보정하기 위한 보정 데이터를 획득하고, 상기 촬영된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 B의 계조 값을 보정하기 위한 보정 데이터를 획득할 수 있다.
그리고, 상기 보정하는 단계는 상기 R에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R 서브 픽셀을 보정하고, 상기 G에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 G 서브 픽셀을 보정하고, 상기 B에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 B 서브 픽셀을 보정할 수 있다.
한편, 상기 레드 영역에 포함된 상기 복수의 계조 영역의 R의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, G 및 B의 계조 값은 서로 동일하며, 상기 그린 영역에 포함된 상기 복수의 계조 영역의 G의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 B의 계조 값은 서로 동일하며, 상기 블루 영역에 포함된 상기 복수의 계조 영역의 B의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 G의 계조 값은 서로 동일할 수 있다.
그리고, 본 제어 방법은 상기 디스플레이 장치 주변의 조도에 기초하여, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 미만일 경우, 기설정된 계조 값 이상의 계조 구간(range)은 제외하고 상기 기설정된 계조 값 미만의 계조 구간만을 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하고, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 이상일 경우, 기설정된 계조 값 미만의 계조 구간은 제외하고 상기 기설정된 계조 값 이상의 계조 구간만을 상기 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하는 단계를 더 포함할 수 있다.
또한, 본 제어 방법은 상기 배경 이미지에 포함된 컬러에 기초하여, 레드 영역, 그린 영역 및 블루 영역 중 상기 배경 이미지에 기설정된 비율 이상 포함된 컬러에 대응되는 영역에 포함된 복수의 계조 영역 간의 계조 값 차이가 다른 영역에 포함된 복수의 계조 영역 간의 계조 값보다 작아지도록 상기 기준 이미지를 생성하는 단계를 더 포함할 수 있다.
그리고, 상기 기준 이미지를 생성하는 단계는, 상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고, 상기 배경 이미지에 그린 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고, 상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 디스플레이 장치는 전자 장치에 의해 보정된 배경 이미지를 표시함으로써, 사용자에게 디스플레이 장치가 투명한 유리창처럼 보이는 시각적 효과를 극대화 시켜서 제공할 수 있다.
도 1은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 도면이다.
도 2는 본 개시의 일 실시 예에 따른 배경 이미지를 제공하는 전자 시스템을 설명하기 위한 도면이다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 블록도이다.
도 4는 본 개시의 일 실시 예에 따른 기준 이미지를 설명하기 위한 도면이다.
도 5는 본 개시의 일 실시 예에 따른 기준 이미지를 촬영하는 실시 예를 설명하기 위한 도면이다.
도 6a 및 도 6b는 본 개시의 일 실시 예에 따른 디스플레이 장치 및 배경 영역을 식별하는 실시 예를 설명하기 위한 도면이다.
도 7은 본 개시의 일 실시 예에 따른 전자 장치가 촬영된 이미지에서 기준 이미지 및 디스플레이 장치의 주변 영역을 식별하는 예를 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른 보정 데이터를 생성하는 방법을 설명하기 위한 도면이다.
도 9는 본 개시의 일 실시 예에 따른 보정 데이터를 설명하기 위한 도면이다.
도 10은 본 개시의 일 실시 예에 따른 디스플레이 장치가 보정된 배경 이미지를 표시하는 실시 예를 설명하기 위한 도면이다.
도 11a 및 도 11b는 본 개시의 일 실시 예에 따른 배경의 계조 값에 따라 수정된 기준 이미지를 설명하기 위한 도면이다.
도 12는 본 개시의 일 실시 예에 따른 배경의 색상에 따라 수정된 기준 이미지를 설명하기 위한 도면이다.
도 13은 본 개시의 일 실시 예에 따른 디스플레이 장치의 휘도를 조절하는 실시 예를 설명하기 위한 도면이다.
도 14는 본 개시의 일 실시 예에 따른 배경 이미지를 제공하는 순서도이다.
도 15는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 상세 블록도이다.
도 16은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 상세 블록도이다.
도 17은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 개시의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어도 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그에 대한 상세한 설명은 축약하거나 생략한다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 개시의 실시 예를 상세하게 설명하지만, 본 개시가 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 개시를 상세히 설명한다.
도 2는 본 개시의 일 실시 예에 따른 배경 이미지를 제공하는 전자 시스템을 설명하기 위한 도면이다.
도 2를 참조하면, 본 개시의 일 실시 예에 따른 전자 시스템(10)은 전자 장치(100) 및 디스플레이 장치(200)를 포함할 수 있다.
전자 장치(100)는, 도 2에 도시된 바와 같이, 스마트 폰 등과 같은 사용자 단말 장치가 될 수 있다. 다만, 이는 일 실시 예에 불과할 뿐, 전자 장치(100)는 캠코더, 태블릿 PC 등 카메라를 구비한 다양한 전자 장치로 구현될 수 있다.
디스플레이 장치(200)는, 도 2에 도시된 바와 같이, 스마트 TV가 될 수 있다. 다만, 이는 일 실시 예에 불과할 뿐, 디스플레이 장치(200)는 디지털 TV, 데스크톱 PC, 키오스크 등 디스플레이를 구비한 다양한 전자 장치로 구현될 수 있다.
전자 장치(100) 및 디스플레이 장치(200)는 통신을 수행하여 다양한 데이터를 송수신할 수 있다.
특히, 전자 장치(100)는 디스플레이 장치(200) 주변의 배경과 관련된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다.
이를 위해, 전자 장치(100)는 디스플레이 장치(200)가 설치된 영역을 촬영하여, 디스플레이 장치(200)와 디스플레이 장치(200)의 주변 영역이 포함된 이미지를 획득할 수 있다.
예를 들어, 디스플레이 장치(200)가 도 1에 도시된 바와 같이 벽에 설치된 경우, 전자 장치(100)는 디스플레이 장치(200)가 설치된 영역을 촬영하여 디스플레이 장치(200)와 디스플레이 장치(200) 주변의 벽이 포함된 이미지를 획득할 수 있다.
그리고, 전자 장치(100)는 이미지를 분석하여 디스플레이 장치(200)가 위치하는 영역과 디스플레이 장치(200) 주변의 배경 영역을 식별하고, 식별된 배경 영역을 이용하여 배경 이미지를 생성할 수 있다.
그리고, 전자 장치(100)는 배경 이미지의 계조 값과 실제 배경의 계조 값이 최소화 되도록 배경 이미지의 계조 값을 보정한 뒤, 보정된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다. 여기에서, 보정된 배경 이미지는 사용자로 하여금 디스플레이 장치(200) 주변의 실제 배경과 디스플레이 장치(200)에서 출력 중인 배경 이미지 간 이질감 없는 하나의 배경으로 인식될 수 있도록 보정된 이미지를 의미한다. 이와 관련된 상세한 설명은 후술한다.
이후, 디스플레이 장치(200)는 보정된 배경 이미지를 표시함으로써, 사용자에게 디스플레이 장치가 투명한 유리창처럼 보이는 시각적 효과를 제공할 수 있다.
한편, 이상에서는 전자 장치(100) 및 디스플레이 장치(200)가 직접적으로 통신을 수행하는 것으로 설명하였으나, 본 개시가 반드시 이에 한정되는 것은 아니다.
구체적으로, 전자 장치(100)는 외부 장치(미도시)를 통해서 디스플레이 장치(200)와 통신을 수행할 수도 있다. 여기에서, 외부 장치(미도시)는 셋톱박스가 될 수 있음은 물론, 전자 장치(100) 및 디스플레이 장치(200)간 통신을 중계하는 AP, 라우터 등 다양한 중계 기기가 될 수 있다. 구체적으로, 전자 장치(100)는 외부 장치(미도시)와 통신하여, 외부 장치로 기준 이미지를 전송하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 수신된 기준 이미지를 디스플레이 할 수 있다. 또한, 전자 장치(100)는 외부 장치(미도시)로 보정된 배경 이미지를 전송하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 수신된 보정된 배경 이미지를 디스플레이 할 수 있다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 블록도이다.
도 3을 참조하면, 본 개시의 일 실시 예에 따른 전자 장치(100)는 통신부(110), 카메라(120), 메모리(130) 및 프로세서(140)를 포함할 수 있다.
통신부(110)는 디스플레이 장치(200)와 통신을 수행하여 다양한 데이터를 송수신할 수 있다.
특히, 통신부(110)는 레드 영역, 그린 영역 및 블루 영역을 포함하는 기준 이미지를 디스플레이 장치(200)로 전송할 수 있다. 기준 이미지와 관련된 상세한 설명은 후술한다.
또한, 통신부(110)는 디스플레이 장치(200)와 통신을 수행하여, 디스플레이 장치(200)로 보정된 배경 이미지를 전송할 수 있다. 이에 따라, 디스플레이 장치(200)는 보정된 배경 이미지를 표시하여 유리창과 같은 효과를 제공할 수 있다.
이를 위해, 통신부(110)는 무선 통신 칩, 와이 파이 칩, 블루투스 칩 등을 포함할 수 있다.
카메라(120)는 다양한 피사체를 촬영할 수 있다. 특히, 카메라(120)는 디스플레이 장치(200)가 설치된 영역을 촬영할 수 있다. 여기에서, 디스플레이 장치(200)는 벽면의 일 영역에 액자 형태로 설치되거나, 벽면 전방에 스탠드 형태로 설치될 수 있다.
한편, 디스플레이 장치(200)가 기준 이미지를 표시하고 있는 경우, 카메라(120)에 의해 촬영된 이미지에는 기준 이미지를 표시하는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역(즉, 배경)이 포함될 수 있다.
메모리(130)는 전자 장치(100)를 제어하기 위한 프로그램 및 데이터가 저장될 수 있다. 특히, 메모리(130)는 카메라(120)를 통해 촬영된 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역이 포함된 이미지를 저장할 수 있다.
또한, 메모리(130)는 레드 영역, 그린 영역 및 블루 영역을 포함하는 기준 이미지를 저장할 수 있다. 기준 이미지와 관련된 상세한 설명은 후술한다.
프로세서(140)는 전자 장치(100)의 전반적인 동작을 제어한다. 이를 위해, 프로세서(140)는 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다.
이하, 도 4 내지 도 10을 참조하여 프로세서(140)의 동작에 관해 구체적으로 설명한다.
도 4는 본 개시의 일 실시 예에 따른 기준 이미지를 설명하기 위한 도면이다.
본 개시의 일 실시 예에 따른 전자 장치(100)는 기준 이미지(400)를 저장할 수 있다. 그리고, 프로세서(140)는 기저장된 기준 이미지(400)를 디스플레이 장치(200)로 전송하도록 통신부(110)를 제어할 수 있다.
도 4를 참조하면, 기준 이미지(400)는 레드 영역(410), 그린 영역(420) 및 블루 영역(430)을 포함할 수 있다. 여기에서, 레드 영역(410), 그린 영역(420) 및 블루 영역(430) 각각은 상이한 계조 값을 가지는 복수의 계조 영역(411, 412,413, 421, 422, 423, 431, 432, 433…)을 포함할 수 있다.
여기에서, 레드 영역(410)에 포함된 복수의 계조 영역은, R의 계조 값이 기설정된 값만큼 단계적으로 차이가 나고, G 및 B의 계조 값은 서로 동일할 수 있다. 그리고, 그린 영역(420)에 포함된 복수의 계조 영역은, G의 계조 값이 기설정된 값만큼 단계적으로 차이가 나고, R 및 B의 계조 값은 서로 동일할 수 있다. 그리고, 블루 영역(430)에 포함된 복수의 계조 영역은, B의 계조 값이 기설정된 값만큼 단계적으로 차이가 나고, R 및 G의 계조 값은 서로 동일할 수 있다.
예를 들어, 레드 영역(410)의 제1 계조 영역(411)은 R의 계조 값이 10이고, 제2 계조 영역(412)은 R의 계조 값이 계조 값이 20이며, 제3 계조 영역(413)은 R의 계조 값이 계조 값이 30이 될 수 있다. 여기에서, G 및 B의 계조 값은 각 계조 영역에서 서로 동일할 수 있다.
그리고, 블루 영역(420)의 제1 계조 영역(421)은 B의 계조 값이 10이고, 제2 계조 영역(422)은 B의 계조 값이 계조 값이 20이며, 제3 계조 영역(423)은 B의 계조 값이 계조 값이 30이 될 수 있다. 여기에서, R 및 B의 계조 값은 각 계조 영역에서 서로 동일할 수 있다.
그리고, 그린 영역(430)의 제1 계조 영역(431)은 G의 계조 값이 10이고, 제2 계조 영역(432)은 G의 계조 값이 계조 값이 20이며, 제3 계조 영역(433)은 G의 계조 값이 계조 값이 30이 될 수 있다. 여기에서, R 및 G의 계조 값은 각 계조 영역에서 서로 동일할 수 있다.
한편, 레드 영역(410), 그린 영역(420) 및 블루 영역(430) 각각은, 도 4에 도시된 바와 같이 계조 값 1에서 계조 값 251까지의 범위를 가질 수 있고, 각 계조 영역은 10단위로 구분될 수 있다. 즉, 레드 영역(410), 그린 영역(420) 및 블루 영역(430) 각각에 포함된 영역에 포함된 복수의 계조 영역은 10단위로 단계적으로 계조 값이 증가되는 형태가 될 수 있다.
한편, 여기에서 계조 값 1에서 계조 값 251까지의 범위는 일 실시 예일 뿐, 계조 값의 범위가 이에 한정되는 것은 아니다. 또한, 여기서는 10 단위로 계조 영역의 계조 값이 단계적으로 커지는 것으로 설명하였으나, 단위는 4 단위, 8 단위 등 다양하게 설정될 있다.
또한, 여기서는 레드 영역(410), 그린 영역(420) 및 블루 영역(430)을 포함하는 기준 이미지를 설명하였으나 이는 일 실시 예일 뿐, 기준 이미지는 낮은 계조 값에서 높은 계조 값을 단계적으로 표현한 다양한 이미지가 될 수 있다. 예를 들어, 기준 이미지는 그레이 스케일(gray scale)로 표현될 수 있다.
또한, 여기서는 기준 이미지가 전자 장치(100)에 기저장되어 있는 것으로 설명하였으나, 기준 이미지는 외부 서버(미도시) 또는 디스플레이 장치(200)로부터 수신한 이미지가 될 수도 있다. 디스플레이 장치(200)로부터 기준 이미지를 수신한 경우이면, 전자 장치(100)가 기준 이미지를 디스플레이 장치(200)로 전송하는 단계는 생략될 수 있다.
도 5는 본 개시의 일 실시 예에 따른 기준 이미지를 촬영하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 기준 이미지를 디스플레이 장치(200)로 전송할 수 있다. 이에 따라, 디스플레이 장치(200)는 도 5에 도시된 바와 같이, 전자 장치(100)로부터 수신된 기준 이미지를 표시할 수 있다.
프로세서(140)는 카메라(120)를 통해, 기준 이미지를 표시하는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변(즉, 배경)을 포함하는 영역을 촬영할 수 있다. 이하에서는, 설명의 편의를 위해 촬영된 영상에서 디스플레이 장치(200)가 존재하는 영역을 디스플레이 영역이라 하고, 디스플레이 장치(200)의 주변 영역을 배경 영역이라 한다. 그리고, 배경 영역에 기초하여 생성된 이미지를 배경 이미지라 한다.
구체적으로, 프로세서(140)는 디스플레이 장치(200)가 기준 이미지를 표시하고 있는 상태에서, 카메라 제어를 위한 사용자 명령이 입력되면, 기준 이미지를 표시하는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변을 포함하는 영역을 촬영할 수 있다.
이 때, 디스플레이 장치(200)에 디스플레이 된 기준 이미지(510), 즉 전자 장치(100)에 기저장된 기준 이미지는 전자 장치(100)의 카메라(120)에 의해 촬영된 기준 이미지(520)와 상이할 수 있다.
구체적으로, 디스플레이 장치에 디스플레이 된 기준 이미지(510)에 포함된 레드 영역, 그린 영역 및 블루 영역 각각의 계조 값은, 전자 장치(100)의 카메라에 의해 촬영된 기준 이미지(520)에 포함된 레드 영역, 그린 영역 및 블루 영역 각각의 계조 값과 상이할 수 있다.
이는, 전자 장치(100)의 카메라(120)를 통해 촬영된 기준 이미지는 전자 장치(100)에 설정된 색 온도, 톤 등에 따라 기저장된 기준 이미지의 계조 값이 변경된 이미지이기 때문이다.
같은 이유에서, 전자 장치(100)의 카메라(120)를 통해 촬영된 배경 영역의 계조 값도 실제 배경의 계조 값과 상이할 수 있다. 따라서, 전자 장치(100)의 카메라를 통해 촬영한 배경 영역에 기초하여 생성한 배경 이미지를 색 보정 없이 디스플레이 장치(200)에 표시할 경우, 실제 배경의 계조 값과 배경 이미지의 계조 값이 상이하여 부자연스럽게 보일 수 있다.
이와 같은 문제점을 해결하기 위해, 프로세서(140)는 촬영된 기준 이미지에 포함된 복수의 계조 영역 및 기저장된 기준 이미지에 포함된 복수의 계조 영역을 비교하여, 배경 이미지의 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득할 수 있다.
이를 위해, 프로세서(140)는 우선 촬영된 영상에서 디스플레이 장치(200)에 표시된 기준 이미지 및 디스플레이 장치(200) 주변의 배경 영역을 식별할 수 있다.
도 6a 및 도 6b는 본 개시의 일 실시 예에 따른 디스플레이 장치 및 배경 영역을 식별하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 촬영된 영상에서 디스플레이 장치(200) 및 디스플레이 장치(200) 주변의 배경 영역을 식별할 수 있다. 구체적으로, 프로세서(140)는 촬영된 영상에서 디스플레이 장치(200)에 표시된 기준 이미지 및 디스플레이 장치(200) 주변의 배경 영역을 식별할 수 있다.
이를 위해, 프로세서(140)는 카메라 어플리케이션이 실행되면 도 6a에 도시된 바와 같이 가이드 UI(600)를 표시할 수 있다. 여기에서, 가이드 UI(600)는 디스플레이 장치(200)의 화면이 특정 영역에 포함될 수 있도록 가이드 하기 위한 UI가 될 수 있다.
이후, 프로세서(140)는 사용자 명령에 따라, 디스플레이 장치(200) 및 디스플레이 장치(200) 주변을 포함하는 영역이 촬영되면, 촬영된 이미지를 분석하여, 가이드 UI(600)에 포함된 영역은 디스플레이 장치(200)의 화면이 표시된 영역으로 식별하고, 그 외 영역은 배경 영역으로 식별할 수 있다.
구체적으로, 프로세서(140)는 가이드 UI를 통해 디스플레이 장치(200)의 외곽 부분을 추출한 뒤, 추출된 외곽 부분에 포함된 영역을 디스플레이 장치(200)의 화면 영역으로 식별하고, 식별된 화면 영역으로부터 기설정된 범위 이내의 영역을 배경 영역으로 식별할 수 있다.
다른 실시 예로, 프로세서(140)는 디스플레이 장치(200)에 표시된 마커를 이용하여 디스플레이 장치(200) 및 디스플레이 장치(200) 주변의 배경 영역을 식별할 수 있다.
예를 들어, 도 6b를 참조하면, 디스플레이 장치(200)는 화면의 각 모서리 영역에 마커(611 내지 614)를 표시할 수 있다. 여기에서, 마커는 전자 장치(100)로부터 마커 생성 명령을 수신한 디스플레이 장치(200)에 의해, 디스플레이 장치(200)의 화면에 표시될 수 있다.
그리고, 프로세서(140)는 카메라(120)를 통해 도 6b에 도시된 바와 같이 4개의 마커(611' 내지 614')가 표시된 디스플레이 장치(200)를 포함하는 이미지를 촬영할 수 있다.
이후, 프로세서(140)는 촬영된 이미지에 포함된 4개의 마커(611' 내지 614')를 이용하여 디스플레이 장치(200)의 외곽 부분을 추출한 뒤, 추출된 외곽 부분에 포함된 영역을 디스플레이 장치(200)의 화면 영역으로 식별하고, 식별된 화면 영역으로부터 기설정된 범위 이내의 영역을 배경 영역으로 식별할 수 있다.
한편, 상술한 실시 예는 디스플레이 영역 및 배경 영역을 식별하기 위한 하나의 예로써, 식별 방법이 반드시 이에 한정되는 것은 아니다. 예를 들어, 프로세서(140)는 카메라(120)를 통해 촬영된 영상에 객체 인식 알고리즘을 적용하여 사각 모양의 오브젝트를 인식하고, 인식된 오브젝트를 디스플레이 장치(200)의 화면 영역으로 식별하고, 그 외 영역을 배경 영역으로 식별할 수도 있다.
이에 따라, 도 7에 도시된 바와 같이, 프로세서(140)는 촬영된 이미지에 포함된 기준 이미지(710) 및 디스플레이 장치(200)의 배경 영역(720) 각각을 식별할 수 있다.
도 8은 본 개시의 일 실시 예에 따른 보정 데이터를 생성하는 방법을 설명하기 위한 도면이다.
프로세서(140)는 촬영된 이미지에 포함된 기준 이미지(810) 및 기저장된 기준 이미지(820)에 기초하여 보정 데이터를 생성할 수 있다. 여기에서, 기저장된 기준 이미지(820)는 디스플레이 장치(200)에 표시된 기준 이미지(510)와 동일한 이미지가 될 수 있다.
이를 위해, 프로세서(140)는 먼저 촬영된 이미지에 포함된 기준 이미지(810)에 포함된 복수의 계조 영역 및 기저장된 기준 이미지(820)에 포함된 복수의 계조 영역을 비교할 수 있다.
구체적으로, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 레드 영역의 복수의 계조 영역(811, 812, 813…) 각각의 계조 값과 기준 이미지(820)에 포함된 레드 영역의 복수의 계조 영역(811', 812', 813'…) 각각의 계조 값을 비교할 수 있다.
마찬가지로, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 그린 영역의 복수의 계조 영역(821, 822, 823…) 각각의 계조 값과 기준 이미지(820)에 포함된 그린 영역의 복수의 계조 영역(821', 822', 823'…) 각각의 계조 값을 비교할 수 있다.
마찬가지로, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 블루 영역의 복수의 계조 영역(831, 832, 833…) 각각의 계조 값과 기준 이미지(820)에 포함된 블루 영역의 복수의 계조 영역(831', 832', 833'…) 각각의 계조 값을 비교할 수 있다.
예를 들어, 도 8을 참조하면, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 레드 영역의 제1 계조 영역(811)의 계조 값을 기저장된 기준 이미지(820)에 포함된 레드 영역의 제1 계조 영역(811')의 계조 값과 비교하고, 촬영된 기준 이미지(810)에 포함된 레드 영역의 제2 계조 영역(812)의 계조 값을 기저장된 기준 이미지(820)에 포함된 레드 영역의 제2 계조 영역(812')의 계조 값과 비교하며, 촬영된 기준 이미지(810)에 포함된 레드 영역의 제3 계조 영역(813)의 계조 값을 기저장된 기준 이미지(820)에 포함된 레드 영역의 제3 계조 영역(813')의 계조 값과 비교할 수 있다.
마찬가지로, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 블루 영역의 제1 계조 영역(821)의 계조 값을 기저장된 기준 이미지(820)에 포함된 블루 영역의 제1 계조 영역(821')의 계조 값과 비교하고, 촬영된 기준 이미지(810)에 포함된 블루 영역의 제2 계조 영역(822)의 계조 값을 기저장된 기준 이미지(820)에 포함된 블루 영역의 제2 계조 영역(822')의 계조 값과 비교하며, 촬영된 기준 이미지(810)에 포함된 블루 영역의 제3 계조 영역(823)의 계조 값을 기저장된 기준 이미지(820)에 포함된 블루 영역의 제3 계조 영역(823')의 계조 값과 비교할 수 있다.
마찬가지로, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 그린 영역의 제1 계조 영역(831)의 계조 값을 기저장된 기준 이미지(820)에 포함된 그린 영역의 제1 계조 영역(831')의 계조 값과 비교하고, 촬영된 기준 이미지(810)에 포함된 그린 영역의 제2 계조 영역(832)의 계조 값을 기저장된 기준 이미지(820)에 포함된 그린 영역의 제2 계조 영역(832')의 계조 값과 비교하며, 촬영된 기준 이미지(810)에 포함된 그린 영역의 제3 계조 영역(833)의 계조 값을 기저장된 기준 이미지(820)에 포함된 그린 영역의 제3 계조 영역(833')의 계조 값과 비교할 수 있다.
한편, 여기서는 각 컬러 영역별로 3개의 계조 영역을 비교하는 것으로 설명하였으나, 이는 설명의 편의를 위한 것이다. 즉, 프로세서(140)는 촬영된 이미지에 포함된 기준 이미지(810)의 복수의 계조 영역 모두를 기저장된 기준 이미지(820)의 복수의 계조 영역 각각과 비교할 수 있다.
프로세서(140)는 복수의 계조 영역 각각을 비교한 결과에 기초하여, 촬영된 이미지에 포함된 기준 이미지(810)의 계조 값에 대응되는 기저장된 기준 이미지(820)의 계조 값을 판단할 수 있다.
구체적으로, 프로세서(140)는 복수의 계조 영역 각각을 비교한 결과에 기초하여, 계조 영역 별로 촬영된 이미지에 포함된 기준 이미지(810)의 계조 값에 대응되는 기저장된 기준 이미지(820)의 계조 값을 판단할 수 있다.
예를 들어, 도 8을 참조하면, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 레드 영역의 제1 계조 영역(811)의 계조 값이 11이고, 기저장된 기준 이미지(820)에 포함된 레드 영역의 제1 계조 영역(811')의 계조 값이 10인 경우, 촬영된 기준 이미지(810)의 계조 값 11에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 10인 것으로 판단할 수 있다. 그리고, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 레드 영역의 제2 계조 영역(812)의 계조 값이 15이고, 기저장된 기준 이미지(820)에 포함된 레드 영역의 제2 계조 영역(812')의 계조 값이 20인 경우, 촬영된 기준 이미지(810)의 계조 값 15에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 20인 것으로 판단할 수 있다. 그리고, 프로세서(140)는 촬영된 기준 이미지(810)에 포함된 레드 영역의 제3 계조 영역(813)의 계조 값이 20이고, 기저장된 기준 이미지(820)에 포함된 레드 영역의 제3 계조 영역(813')의 계조 값이 30인 경우, 촬영된 기준 이미지(810)의 계조 값 20에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 30인 것으로 판단할 수 있다.
한편, 그린 영역 및 블루 영역에 대해서도 상술한 기술적 사상이 그대로 적용될 수 있다. 또한, 상술한 3개의 계조 영역 외 나머지 계조 영역에 대해서도 상술한 기술적 사상이 그대로 적용될 수 있다.
이와 같은 과정을 통해, 프로세서(140)는 레드 영역, 그린 영역 및 블루 영역 별로, 촬영된 이미지에 포함된 기준 이미지(810)의 계조 값에 대응되는 기저장된 기준 이미지(820)의 계조 값을 판단할 수 있다.
그리고, 프로세서(140)는 판단된 계조 값에 기초하여 레드 영역, 그린 영역 및 블루 영역 별로 보정 데이터를 생성할 수 있다.
구체적으로, 프로세서(140)는 판단된 계조 값에 보간법(interpolation)을 적용하여 보정 데이터를 생성할 수 있다. 여기에서, 보간법은 선형 보간이 될 수 있음은 물론, 3점을 지나는 2차 다항식 또는 4점을 지나는 3차 다항식을 이용한 고차 보간 등 다양한 보간이 될 수 있다.
전술한 레드 영역에 대한 실시 예와 같이, 촬영된 기준 이미지(810)의 계조 값 11에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 10이고, 촬영된 기준 이미지(810)의 계조 값 15에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 20이며, 촬영된 기준 이미지(810)의 계조 값 20에 대응되는, 기저장된 기준 이미지(820)의 계조 값은 30인 경우, 프로세서(140)는 좌표 (11,10) 및 좌표 (15,20)에 보간법을 적용하고, 좌표 (15,20) 및 좌표(20,30)에 보간법을 적용한 보정 데이터를 생성할 수 있다.
마찬가지로, 그린 영역 및 블루 영역에 대해서도 상술한 보간법 적용을 통해 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 도 9에 도시된 바와 같이, 레드 영역에 대한 보정 데이터(도 9의 (a)), 그린 영역에 대한 보정 데이터(도 9의 (b)) 및 블루 영역에 대한 보정 데이터(도 9의 (c)) 각각을 생성할 수 있다. 여기에서, 세로축은 카메라를 통해 촬영된 기준 이미지의 계조 값을 의미하고, 가로축은 기저장된 기준 이미지의 계조 값, 즉 디스플레이 장치(200)에 의해 표시되는 기준 이미지의 계조 값을 의미한다.
이후, 프로세서(140)는 보정 데이터를 이용하여 카메라(120)를 통해 촬영된 이미지를 보정할 수 있다.
구체적으로, 프로세서(140)는 보정 데이터를 이용하여 배경 이미지를 보정할 수 있다. 여기에서, 배경 이미지는 전술한 디스플레이 장치(200)의 주변 영역에 대응되는 이미지가 될 수 있다. 일 예로, 배경 이미지는 촬영된 이미지 내에서 디스플레이 장치(200)의 상측, 하측, 우측, 및 좌측 영역 중 적어도 하나에 위치하는 이미지가 될 수 있다.
이를 위해, 프로세서(140)는 먼저 배경 이미지의 계조 값을 판단할 수 있다. 구체적으로, 프로세서(140)는 배경 이미지를 분석하여, 배경 이미지에 포함된 복수의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 판단할 수 있다.
그리고, 프로세서(140)는 보정 데이터를 이용하여, 배경 이미지에 포함된 복수의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값을 판단할 수 있다.
구체적으로, 프로세서(140)는 레드 영역에 대한 보정 데이터를 이용하여 R 서브 픽셀의 계조 값에 대응되는 계조 값을 판단하고, 그린 영역에 대한 보정 데이터를 이용하여 G 서브 픽셀의 계조 값에 대응되는 계조 값을 판단하고, 블루 영역에 대한 보정 데이터를 이용하여 B 서브 픽셀의 계조 값에 대응되는 계조 값을 판단할 수 있다.
예를 들어, 프로세서(140)는 배경 이미지에 포함된 제1 픽셀의 R 서브 픽셀의 계조 값이 10인 경우, 도 9의 (a)와 같은 레드 영역에 대한 보정 데이터를 이용하여 R 서브 픽셀의 계조 값에 대응되는 계조 값 20을 판단하고, 배경 이미지에 포함된 제1 픽셀의 G 서브 픽셀의 계조 값이 100인 경우, 도 9의 (b)와 같은 그린 영역에 대한 보정 데이터를 이용하여 G 서브 픽셀의 계조 값에 대응되는 계조 값 120을 판단하고, 배경 이미지에 포함된 제1 픽셀의 B 서브 픽셀의 계조 값이 50인 경우, 도 9의 (c)와 같은 블루 영역에 대한 보정 데이터를 이용하여 B 서브 픽셀의 계조 값에 대응되는 계조 값 60을 판단할 수 있다.
이와 같은 방법으로, 프로세서(140)는 배경 이미지에 포함된 제1 픽셀부터 제n 픽셀에 포함된 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값을 판단할 수 있다.
그리고, 프로세서(140)는 배경 이미지의 R, G, B 서브 픽셀의 계조 값을 보정 데이터에 기초하여 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값으로 보정할 수 있다.
전술한 실시 예와 같이, 배경 미지의 제1 픽셀의 R, G, B 각각의 계조 값이 각각 10, 100, 50인 경우, 프로세서(140)는 보정 데이터를 이용하여 제1 픽셀의 R, G, B 각각의 계조 값을 각각 20, 120, 60으로 보정할 수 있다.
마찬가지로, 프로세서(140)는 제2 픽셀 내지 제n 픽셀에 포함된 R, G, B 서브 픽셀의 계조 값을 보정 데이터를 이용하여 보정할 수 있다.
이후, 프로세서(140)는 보정된 배경 이미지가 디스플레이 장치(200)에 출력되도록 통신부(110)를 제어할 수 있다.
구체적으로, 프로세서(140)는 보정된 배경 이미지가 디스플레이 장치(200)에 출력되도록, 기준 이미지를 통신부(110)를 통해 디스플레이 장치(200)로 전송할 수 있다.
또는, 프로세서(140)는 보정된 배경 이미지를 외부 장치(미도시)로 전송하도록 통신부(110)를 제어하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 보정된 배경 이미지를 수신하여 출력할 수도 있다.이에 따라, 디스플레이 장치(200)는 도 10에 도시된 바와 같이, 보정된 배경 이미지를 표시할 수 있다.
따라서, 본 개시의 일 실시 예에 따른 전자 장치(100)는 실제 배경과 배경 이미지의 색상 차를 최소화 시킴으로써, 사용자에게 디스플레이 장치(200)가 투명한 유리창처럼 보이는 시각적 효과를 극대화 시킬 수 있다.
또한, 한번의 촬영만으로 보정된 배경 이미지를 획득할 수 있다는 점에서 사용자 편의성이 증대된다.
도 11a 및 도 11b는 본 개시의 일 실시 예에 따른 배경의 계조 값에 따라 수정된 기준 이미지를 설명하기 위한 도면이다.
프로세서(140)는 디스플레이 장치(200) 주변의 조도에 기초하여, 기준 이미지의 계조 값 범위를 수정할 수 있다. 이를 위해, 전자 장치(140)는 전자 장치(100) 주변의 조도를 감지할 수 있는 조도 센서(미도시)를 더 포함할 수 있다.
구체적으로, 프로세서(140)는 디스플레이 장치(200) 주변의 조도가 기설정된 임계 조도 미만일 경우, 기설정된 계조 값 이상의 계조 구간(range)은 제외하고 기설정된 계조 값 미만의 계조 구간만을 포함하도록 기준 이미지를 수정할 수 있다.
예를 들어, 도 11a를 참조하면, 프로세서(140)는 디스플레이 장치(200) 주변의 조도가 기설정된 임계 조도 미만인 경우, 계조 값의 범위가 1부터 251인 기저장된 기준 이미지의 계조 값 범위를 1부터 150이 되도록 수정할 수 있다.
또한, 프로세서(140)는 디스플레이 장치(200) 주변의 조도가 기설정된 임계 조도 이상일 경우, 기설정된 계조 값 미만의 계조 구간은 제외하고 기설정된 계조 값 이상의 계조 구간만을 포함하도록 기준 이미지를 수정할 수 있다.
예를 들어, 도 11b를 참조하면, 프로세서(140)는 디스플레이 장치(200) 주변의 조도가 기설정된 임계 조도 이상인 경우, 계조 값의 범위가 1부터 251인 기저장된 기준 이미지의 계조 값 범위를 100부터 251이 되도록 수정할 수 있다.
이 경우, 프로세서(140)는 계조 범위를 수정하면서, 계조 단위도 수정할 수 있다. 구체적으로, 프로세서(140)는 기저장된 기준 이미지의 계조 단위보다 상대적으로 작은 계조 단위를 갖도록 기저장된 기준 이미지의 계조 단위를 수정할 수 있다.
예를 들어, 기저장된 기준 이미지의 계조 단위가 10이면, 프로세서(140)는 계조 단위가 5가 되도록 기준 이미지의 계조 단위를 수정할 수 있다.
그리고, 프로세서(140)는 계조 범위 및 계조 단위가 수정된 기준 이미지에 기초하여, 보정 데이터를 생성할 수 있다. 구체적으로, 프로세서(140)는 수정된 기준 이미지를 디스플레이 장치(200)로 전송하고, 수정된 기준 이미지를 표시하는 디스플레이 장치(200)를 촬영한 뒤, 상술한 보정 데이터 생성 방법으로 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 수정 전 기준 이미지에 기초하여 보정 데이터를 생성하는 경우와 비교하였을 때, 상대적으로 정밀한 보정 데이터를 생성할 수 있다.
특히, 수정된 기준 이미지의 계조 단위가 1인 경우, 프로세서(140)는 상술한 보간법을 적용할 필요 없이, 배경 이미지를 보정하기 위한 보정 데이터를 생성할 수 있는 효과가 있다.
도 12는 본 개시의 일 실시 예에 따른 배경의 색상에 따라 수정된 기준 이미지를 설명하기 위한 도면이다.
프로세서(140)는 디스플레이 장치(200) 배경 이미지에 포함된 컬러에 기초하여, 기준 이미지의 계조 값 범위를 수정할 수 있다.
이를 위해, 프로세서(140)는 먼저 디스플레이 장치(200) 주변 영역을 촬영할 수 있다. 예를 들어, 프로세서(140)는 프리 뷰 모드를 통해 디스플레이 장치(200) 주변 영역을 촬영하여, 배경 이미지에 포함된 컬러를 분석할 수 있다.
그리고, 프로세서(140)는 배경 이미지에 포함된 컬러를 분석한 결과에 기초하여, 배경 이미지가 특정 컬러를 기설정된 비율 이상 포함하고 있는 것으로 판단되면, 기저장된 기준 이미지에 포함된 레드 영역, 그린 영역 및 블루 영역 중 적어도 하나의 영역의 계조 범위를 수정할 수 있다.
구체적으로, 프로세서(140)는 배경 이미지가 특정 컬러를 기설정된 비율 이상 포함하고 있는 것으로 판단되면, 기저장된 기준 이미지에 포함된 레드 영역, 그린 영역 및 블루 영역 중 특정 컬러에 대응되는 적어도 하나의 영역의 계조 범위를 수정할 수 있다.
예를 들어, 도 12를 참조하면, 배경 이미지가 레드 색상을 기설정된 비율 이상 포함하고 있는 것으로 판단되면, 프로세서(140)는 기저장된 기준 이미지에서 레드 영역의 계조 범위를 수정할 수 있다.
여기에서, 수정된 계조 범위는 배경 이미지의 컬러를 분석한 결과에 기초하여 결정될 수 있다. 구체적으로, 프로세서(140)는 기설정된 비율 이상 포함된 컬러의 평균 값을 판단하고, 평균 값으로부터 기설정된 범위를 갖도록 계조 범위를 수정할 수 있다.
예를 들어, 배경 이미지가 레드 색상을 기설정된 비율 이상 포함하고 있고, 배경 이미지의 R 평균 값이 150인 경우, 프로세서(140)는 계조 값 150으로부터 기설정된 범위를 갖도록 레드 영역의 계조 범위를 수정할 수 있다. 기설정된 범위가 50으로 설정된 경우, 프로세서(140)는 레드 영역의 계조 범위를 100부터 200으로 수정할 수 있다.
그리고, 프로세서(140)는 계조 범위를 수정하면서, 계조 단위도 수정할 수 있다. 구체적으로, 프로세서(140)는 기저장된 기준 이미지의 계조 단위보다 상대적으로 작은 계조 단위를 갖도록 특정 컬러 영역의 계조 단위를 수정할 수 있다.
예를 들어, 상술한 실시 예에서 기저장된 기준 이미지의 계조 단위가 10이면, 프로세서(140)는 계조 단위가 5가 되도록 기준 이미지의 레드 영역의 계조 단위를 수정할 수 있다.
그리고, 프로세서(140)는 계조 범위 및 계조 단위가 수정된 기준 이미지에 기초하여, 보정 데이터를 생성할 수 있다. 구체적으로, 프로세서(140)는 수정된 기준 이미지를 디스플레이 장치(200)로 전송하고, 수정된 기준 이미지를 표시하는 디스플레이 장치(200)를 촬영한 뒤, 상술한 보정 데이터 생성 방법으로 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 수정 전 기준 이미지에 기초하여 보정 데이터를 생성하는 경우와 비교하였을 때, 특정 컬러 영역에서 상대적으로 정밀한 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 실제 배경의 컬러를 보다 정밀하게 배경 이미지에 구현할 수 있는 효과가 있다.
도 13은 본 개시의 일 실시 예에 따른 디스플레이 장치의 휘도를 조절하는 실시 예를 설명하기 위한 도면이다.
디스플레이 장치(200)의 휘도가 낮을 경우, 카메라(120)를 통해 촬영된 기준 이미지의 최고 계조 값도 낮을 수 있다. 이 경우, 프로세서(140)는 배경 이미지에 포함된 복수의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값을 보정 데이터에서 판단할 수 없는 문제가 발생할 수 있다.
예를 들어, 디스플레이 장치(200)의 휘도가 낮을 경우, 카메라(120)를 통해 촬영된 기준 이미지의 계조 값 범위는 계조 값 1에서 계조 값 245 사이가 될 수 있고, 따라서 프로세서(140)는 도 13의 (a)와 같은 보정 데이터를 생성할 수 있다.
여기에서, 만약 배경 이미지의 계조 값이 높을 경우, 예를 들어 실제 배경이 밝은 벽면으로써 배경 이미지의 계조 값이 250인 경우, 프로세서(140)는 배경 이미지의 계조 값에 대응되는 계조 값을 보정 데이터에서 확인할 수 없는 문제가 있다.
이 경우, 프로세서(140)는 디스플레이 장치(200)의 휘도를 조절하기 위한 신호를 디스플레이 장치(200)로 전송할 수 있다. 예를 들어, 프로세서(140)는 디스플레이 장치(200)의 휘도 조절을 위한 디밍 신호를 전송할 수 있다.
상술한 실시 예에서, 프로세서(140)는 디스플레이 장치(200)의 휘도를 높이기 위한 신호를 디스플레이 장치(200)로 전송할 수 있다.
그리고, 프로세서(140)는 휘도가 조절된 디스플레이 장치(200)에 표시된 기준 이미지에 기초하여 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 도 13의 (b)에 도시된 바와 같이, 촬영된 기준 이미지의 계조 값 범위가 계조 값 1에서 계조 값 255 사이인 보정 데이터를 생성할 수 있다.
이에 따라, 프로세서(140)는 배경 이미지에 포함된 복수의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값을 보정 데이터를 이용하여 판단할 수 있다.
한편, 상술한 기술적 사상은 디스플레이 장치(200)의 휘도가 높음으로 인해서, 배경 이미지에 포함된 복수의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값에 대응되는 계조 값을 보정 데이터에서 판단할 수 없는 경우에도 그대로 적용될 수 있다.
도 14는 본 개시의 일 실시 예에 따른 배경 이미지를 제공하는 순서도이다.
본 개시의 일 실시 예에 따른 전자 장치(100)는 기준 이미지를 디스플레이 장치(200)로 전송(S1410)할 수 있다. 여기에서, 기준 이미지는 전자 장치(100)에 기저장된 이미지로써, 레드 영역, 그린 영역 및 블루 영역을 포함할 수 있다. 그리고, 레드 영역, 그린 영역 및 블루 영역 각각은 상이한 계조 값을 가지는 복수의 계조 영역을 포함할 수 있다.
이에 따라, 디스플레이 장치(200)는 기준 이미지를 디스플레이(S1420)할 수 있다. 여기에서, 디스플레이 되는 기준 이미지의 계조 값은 전자 장치(100)가 디스플레이 장치(200)로 전송한 기준 이미지의 계조 값과 동일할 수 있다.
전자 장치(100)는 기준 이미지를 디스플레이 중인 디스플레이 장치(200)를 포함하는 영역을 촬영(S1430)할 수 있다. 여기에서, 촬영된 이미지에는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역이 포함될 수 있다.
전자 장치(100)는 촬영된 이미지에서 디스플레이 장치(200)의 화면 영역 및 디스플레이 장치(200)의 주변 영역을 식별할 수 있다. 여기에서, 디스플레이 장치(200)의 화면 영역에는 디스플레이 장치(200)에 의해 디스플레이 된 기준 이미지가 포함될 수 있다.
전자 장치(100)는 촬영된 이미지에 포함된 기준 이미지를 기저장된 기준 이미지와 비교할 수 있다. 구체적으로, 전자 장치(100)는 촬영된 이미지에 포함된 기준 이미지의 계조 값과 기저장된 기준 이미지의 계조 값을 비교할 수 있다.
그리고, 전자 장치(100)는 비교 결과에 기초하여, 배경 이미지의 계조 값 변경을 위한 보정 데이터를 생성할 수 있다. 여기에서, 배경 이미지는 촬영된 이미지에 포함된, 디스플레이 장치(200)의 주변 영역에 대응되는 이미지가 될 수 있다.
이후, 전자 장치(100)는 보정 데이터를 이용하여 배경 이미지를 보정(S1450)한 뒤, 보정된 배경 이미지를 디스플레이 장치(200)로 전송(S1460)할 수 있다.
이에 따라, 디스플레이 장치(200)는 실제 배경과 유사한 계조 값의 배경 이미지를 디스플레이 할 수 있다.
한편, 이상에서는 전자 장치(100)가 보정 데이터에 기초하여 배경 이미지를 보정하는 것으로 설명하였으나, 보정은 디스플레이 장치(200)에 의해 수행될 수도 있다. 구체적으로, 전자 장치(100)는 생성한 보정 데이터 및 배경 이미지를 디스플레이 장치(200)로 전송하고, 디스플레이 장치(200)는 수신된 보정 데이터를 이용하여 배경 이미지를 보정한 뒤 디스플레이 할 수 있다.
또한, 보정 데이터는 디스플레이 장치(200)에 의해 생성될 수도 있다. 구체적으로, 전자 장치(100)는 촬영된 기준 이미지 및 기저장된 기준 이미지를 디스플레이 장치(200)로 전송하고, 디스플레이 장치(200)는 촬영된 기준 이미지 및 기저장된 기준 이미지를 비교하여 보정 데이터를 생성할 수 있다.
도 15는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 상세 블록도이다.
도 15를 참조하면, 전자 장치(100)는 통신부(110), 카메라(120), 메모리(130), 디스플레이(150), 감지부(160), 스피커(170) 및 프로세서(140)를 포함할 수 있다. 이하, 상술한 부분과 중복되는 부분은 설명은 축약하거나 생략하여 설명한다.
통신부(110)는 디스플레이 장치(200)와 통신을 수행하여 다양한 데이터를 송수신할 수 있다. 특히, 통신부(110)는 디스플레이 장치(200)와 통신을 수행하여 기준 이미지 및 보정된 배경 이미지를 전송할 수 있다.
또한, 통신부(110)는 외부 서버(미도시)와 통신을 수행하여 다양한 데이터를 송수신할 수 있다. 특히, 통신부(110)는 외부 서버(미도시)와 통신을 수행하여 기준 이미지를 수신할 수 있다.
이를 위해, 통신부(100)는 블루투스 칩, 와이파이 칩 또는 무선통신 칩 등을 포함할 수 있다.
카메라(120)는 다양한 피사체를 촬영할 수 있다. 특히, 카메라(120)는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변을 포함하는 영역을 촬영할 수 있다.
카메라(120)는 복수의 카메라 모듈을 가지는 듀얼 카메라라고 구현될 수 있다. 다만, 이는 일 실시 예일 뿐, 카메라(120)는 하나의 카메라 모듈로 구현될 수도 있다.
메모리(140)는 전자 장치(100)를 구동하기 위한 다양한 모듈을 저장한다. 예를 들어, 메모리(140)에는 베이스 모듈, 센싱 모듈, 통신 모듈, 프리젠테이션 모듈, 웹 브라우저 모듈, 서비스 모듈을 포함하는 소프트웨어가 저장될 수 있다. 이때, 베이스 모듈은 전자 장치(100)에 포함된 각 하드웨어들로부터 전달되는 신호를 처리하여 상위 레이어 모듈로 전달하는 기초 모듈이다. 센싱 모듈은 각종 센서들로부터 정보를 수집하고, 수집된 정보를 분석 및 관리하는 모듈로서, 얼굴 인식 모듈, 음성 인식 모듈, 모션 인식 모듈, NFC 인식 모듈 등을 포함할 수 있다. 프리젠테이션 모듈은 디스플레이 화면을 구성하기 위한 모듈로서, 멀티미디어 컨텐츠를 재생하여 출력하기 위한 멀티미디어 모듈, UI 및 그래픽 처리를 수행하는 UI 렌더링 모듈을 포함할 수 있다. 통신 모듈은 외부와 통신을 수행하기 위한 모듈이다. 웹 브라우저 모듈은 웹 브라우징을 수행하여 웹 서버에 액세스하는 모듈을 의미한다. 서비스 모듈은 다양한 서비스를 제공하기 위한 각종 애플리케이션을 포함하는 모듈이다.
디스플레이(150)는 다양한 이미지를 표시할 수 있다. 특히, 디스플레이(150)는 카메라(120)에 의해 촬영된 이미지를 표시할 수 있다. 또한, 디스플레이(150)는 촬영된 이미지에서 디스플레이 장치(200)를 식별하기 위한 가이드 UI를 표시할 수 있다.
이러한 디스플레이(150)는 LCD(Liquid Crystal Display), PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(150) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(150)는 터치 감지부와 결합되어 터치 스크린으로 구현될 수 있다.
감지부(176)는 사용자 명령을 감지하기 위한 다양한 감지 센서로 구현될 수 있다. 예를 들어, 감지부(160)는 터치 감지부를 포함할 수 있다.
스피커(170)는 오디오 처리부(미도시)에 의해 디코딩이나 증폭, 노이즈 필터링과 같은 다양한 처리 작업이 수행된 각종 오디오 데이터를 출력하는 구성이다. 또한, 스피커(170)는 각종 알림 음이나 음성 메시지를 출력할 수 있다. 본 개시의 일 실시 예에 따르면, 스피커(170)는 카메라(120)에 의해 영상이 촬영될 때 오디오를 출력할 수 있다.
프로세서(140)는 전자 장치(100)의 전반적인 동작을 제어한다. 특히, 프로세서(140)는 기준 이미지를 디스플레이 장치(200)로 전송하도록 통신부(110)를 제어하고, 기준 이미지를 표시한 디스플레이 장치(200)를 촬영하도록 카메라(120)를 제어할 수 있다. 또한, 프로세서(140)는 촬영된 기준 이미지 및 기저장된 기준 이미지를 비교하여 보정 데이터를 생성하고, 보정 데이터를 이용하여 보정한 배경 이미지를 디스플레이 장치(200)로 전송하도록 통신부(110)를 제어할 수 있다.
한편, 보정 데이터의 생성 및/또는 배경 이미지의 보정은 전자 장치(100)와 통신을 수행하는 서버(미도시)에 의해 수행될 수도 있다.
일 실시 예에 따라, 전자 장치(100)는 보정 데이터 및 배경 이미지를 서버(미도시)로 전송할 수 있다. 이 경우, 서버(미도시)는 수신된 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다. 또는, 서버(미도시)는 보정된 배경 이미지를 전자 장치(100)로 전송하고, 전자 장치(100)는 수신된 보정된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다.
일 실시 예에 따라, 전자 장치(100)는 디스플레이 장치(200)를 포함하는 영역을 촬영한 이미지를 서버(미도시)로 전송할 수 있다. 이 경우, 서버(미도시)는 수신된 이미지에서 디스플레이 장치(200)의 화면 영역 및 배경 영역을 식별하고, 촬영된 이미지에 포함된 기준 이미지 및 전자 장치(100)로부터 수신한 기준 이미지를 비교할 수 있다. 그리고, 서버(미도시)는 비교 결과에 기초하여 보정 데이터를 생성할 수 있다. 그리고, 서버(미도시)는 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다. 또는, 서버(미도시)는 보정된 배경 이미지를 전자 장치(100)로 전송하고, 전자 장치(100)는 수신된 보정된 배경 이미지를 디스플레이 장치(200)로 전송할 수 있다.
한편, 도 15에는 도시되어 있지 않으나, 전자 장치(100)는 마이크를 더 포함할 수 있다.
그리고, 프로세서(140)는 마이크(미도시)를 통해 배경 이미지를 표시하기 위한 사용자 음성이 수신되면, 기준 이미지가 디스플레이 장치(200)에 출력될 수 있도록 통신부(110)를 제어할 수 있다. 그리고, 프로세서(140)는 마이크(미도시)를 통해 촬영을 위한 사용자 음성이 수신되면, 촬영을 수행하도록 카메라(120)를 제어하고, 카메라를 통해 획득한 이미지에서 배경 이미지를 획득할 수 있다. 이후, 프로세서(140)는 전술한 바와 같이 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지가 디스플레이 장치(200)에서 출력될 수 있도록 통신부(110)를 제어할 수 있다.
도 16은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 상세 블록도이다.
도 16을 참조하면, 본 개시의 일 실시 예에 따른 디스플레이 장치(200)는 방송 수신부(230), 신호 분리부(235), A/V 처리부(240), 오디오 출력부(245), 저장부(250), 통신부(255), 조작부(260), 프로세서(270), 영상 신호 생성부(275), 패널부(280) 및 LED 드라이버 (290)를 포함할 수 있다.
방송 수신부(230)는 방송국 또는 위성으로부터 유선 또는 무선으로 방송을 수신할 수 있다. 여기에서, 방송 수신부(230)는 튜너로 구현될 수 있다.
신호 분리부(235)는 방송 수신부(230)로부터 수신된 방송 신호를 영상 신호, 오디오 신호, 부가정보 신호로 분리한다. 그리고 신호 분리부(235)는 영상 신호 및 오디오 신호를 A/V 처리부(240)로 전송한다.
A/V 처리부(240)는 방송 수신부(230) 및 저장부(250)로부터 입력된 영상 신호 및 오디오 신호에 대해 비디오 디코딩, 비디오 스케일링, 오디오 디코딩 등의 신호처리를 수행한다. 그리고 A/V 처리부(240)는 영상 신호를 영상 신호 생성부(220)로 전송하고, 오디오 신호를 오디오 출력부(145)로 전송한다.
오디오 출력부(245)는 A/V 처리부(240)로부터 수신된 오디오 신호를 사운드로 변환하여 스피커(미도시)를 통해 출력할 수 있다.
영상 신호 생성부(275)는 GUI(Graphic User Interface)를 생성한다. 그리고 영상 신호 생성부(275)는 생성된 GUI를 A/V 처리부(240)로부터 수신된 영상에 부가한다. 그리고 영상 신호 생성부(275)는 GUI가 부가된 영상에 대응되는 영상 신호를 패널부(280)로 전송한다. 이에 따라, 패널부(280)는 디스플레이 장치(200)에서 제공하는 각종 정보 및 영상 신호 생성부(275)에서 전달된 영상을 표시할 수 있다.
그리고 영상 신호 생성부(275)는 영상 신호에 대응되는 밝기 정보를 추출하고, 추출된 밝기 정보에 대응되는 디밍 신호를 생성할 수 있다. 그리고 영상 신호 생성부(275)는 생성된 디밍 신호를 패널부(280)에 제공할 수 있다. 이러한 디밍 신호는 PWM 신호일 수 있다. 한편, 본 실시 예에서는 영상 신호 생성부(275)에서 디밍 신호를 생성하여 패널부(280)에 제공하는 것으로 설명하였지만, 패널부(280)가 디밍 신호를 자체적으로 생성할 수도 있다.
패널부(280)는 영상을 표시한다. 이러한 패널부(280)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 패널부(280) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 패널부(280)는 터치 감지부와 결합하여 터치 스크린으로 구현될 수 있다.
저장부(250)는 영상 컨텐츠를 저장할 수 있다. 구체적으로, 저장부(250)는 A/V 처리부(240)로부터 영상과 오디오가 압축된 영상 컨텐츠를 수신하고, 이를 저장할 수 있다. 한편, 저장부(250)는 하드디스크, 비휘발성 메모리, 휘발성 메모리 등으로 구현될 수 있다.
조작부(260)는 터치 스크린, 터치패드, 키 버튼, 키 패드 등으로 구현될 수 있다.
통신부(255)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 통신부(255)는 와이파이 칩, 블루투스 칩을 포함할 수 있다. 프로세서(270)는 통신부(255)를 이용하여 각종 외부 기기와 통신을 수행할 수 있다. 특히, 통신부(255)는 전자 장치(100)와 통신을 수행할 수 있다.
한편, 디스플레이 장치(200)는 USB 커넥터가 연결될 수 있는 USB 포트나, 헤드셋, 마우스, LAN 등과 같은 다양한 외부 단자와 연결하기 위한 다양한 외부 입력 포트, DMB(Digital Multimedia Broadcasting) 신호를 수신하여 처리하는 DMB 칩 등을 더 포함할 수 있다.
또한, 디스플레이 장치(200)는 도 16에 도시된 구성 외에, 전원 공급부(미도시) 및 센싱부(미도시)를 더 포함할 수 있다. 전원 공급부는 디스플레이 장치(200) 내의 각 구성에 전원을 공급한다. 센싱부는 카메라, 움직임 감지부 등과 같은 다양한 센싱 장치를 포함할 수 있다.
또한, 디스플레이 장치(200)는 셋톱박스 등의 영상 공급 장치와 연결될 수 있는 인터페이스(미도시)를 더 포함할 수 있다. 여기에서, 인터페이스는 HDMI(High-Definition Multimedia Interface) 입력 단자, 컴포넌트 입력 단자, RGB 단자, DVI 단자, DP 단자, 썬더볼트 단자 또는 USB 입력 단자 등이 될 수 있다. 이에 따라, 디스플레이 장치(200)는 인터페이스(미도시)를 통해 셋톱박스 등의 영상 공급 장치로부터 방송 신호, 컨텐츠에 대한 영상 신호, 오디오 신호 등을 수신할 수 있다.
그리고, 디스플레이 장치(200)는 인터페이스를 통해 영상 공급 장치로부터 수신된 영상 신호를 처리하여 패널부(280)를 통해 영상을 표시하고, 수신된 오디오 신호를 사운드로 변환하여 스피커(미도시)를 통해 출력할 수 있다.
프로세서(270)는 디스플레이 장치(200)의 전반적인 동작을 제어한다. 구체적으로, 프로세서(270)는 조작부(260)를 통하여 입력 받은 제어 명령에 따른 영상이 표시되도록 영상 신호 생성부(275), 패널부(280)를 제어할 수 있다. 특히, 프로세서(270)는 도 16에 도시된 바와 같이, CPU, GPU, ROM, RAM을 포함할 수 있다.
특히, 프로세서(270)는 전자 장치(100)로부터 수신한 기준 이미지를 표시하도록 패널부(280)를 제어할 수 있다. 또한, 프로세서(270)는 전자 장치(100)로부터 수신한 보정된 배경 이미지를 표시하도록 패널부(280)를 제어할 수 있다.
한편, 이상에서는 전자 장치(100)에 의해 배경 이미지가 보정되는 것으로 설명하였으나, 배경 이미지의 보정은 디스플레이 장치(200)에 의해 수행될 수도 있다.
일 실시 예에 따라, 전자 장치(100)로부터 보정 데이터 및 배경 이미지가 수신되면, 프로세서(270)는 수신된 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 하도록 패널부(280)를 제어할 수 있다.
일 실시 예에 따라, 전자 장치(100)로부터 디스플레이 장치(200)를 포함하는 영역을 촬영한 이미지가 수신되면, 프로세서(270)는 촬영된 이미지에서 디스플레이 장치(200)의 화면 영역 및 배경 영역을 식별하고, 촬영된 이미지에 포함된 기준 이미지 및 전자 장치(100)로부터 수신한 기준 이미지를 비교할 수 있다. 그리고, 프로세서(270)는 비교 결과에 기초하여 보정 데이터를 생성할 수 있다. 그리고, 프로세서(270)는 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 하도록 패널부(280)를 제어할 수 있다.
또한, 여기서는 기준 이미지를 전자 장치(100)로부터 수신하는 것으로 설명하였으나, 기준 이미지는 저장부(257)에 기저장된 이미지가 될 수도 있다.
이 경우, 프로세서(240)는 전자 장치(100)로부터 기준 이미지를 표시하기 위한 사용자 명령이 수신되면, 기준 이미지를 표시할 수 있다. 그리고, 전자 장치(100)로부터 디스플레이 장치(200)를 포함하는 영역을 촬영한 이미지가 수신되면, 프로세서(270)는 촬영된 이미지에서 디스플레이 장치(200)의 화면 영역 및 배경 영역을 식별하고, 촬영된 이미지에 포함된 기준 이미지 및 저장부(257)에 기저장된 기준 이미지를 비교할 수 있다. 그리고, 프로세서(270)는 비교 결과에 기초하여 보정 데이터를 생성할 수 있다. 그리고, 프로세서(270)는 보정 데이터에 기초하여 배경 이미지를 보정하고, 보정된 배경 이미지를 디스플레이 하도록 패널부(280)를 제어할 수 있다.
도 17은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
전자 장치(100)는 레드 영역, 그린 영역 및 블루 영역을 포함하며 각 영역이 상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기준 이미지를 디스플레이 장치로 전송(S1710)할 수 있다.
그리고, 전자 장치(100)는 카메라를 통해, 기준 이미지를 표시하는 디스플레이 장치 및 디스플레이 장치의 배경을 촬영(S1720)할 수 있다.
그리고, 전자 장치(100)는 촬영된 이미지에 포함된 복수의 계조 영역 및 저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득(S1730)할 수 있다.
이후, 전자 장치(100)는 획득된 보정 데이터에 기초하여 촬영된 이미지에서 배경에 대응되는 배경 이미지를 보정(S1740)할 수 있다.
그리고, 전자 장치(100)는 보정된 배경 이미지를 디스플레이 장치로 전송(S1750)할 수 있다.
이에 따라, 디스플레이 장치(200)는 보정된 배경 이미지를 표시하여 유리창과 같은 시각적 효과를 제공할 수 있다.
한편, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 설치 가능한 소프트웨어 또는 어플리케이션 형태로 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 대한 소프트웨어 업그레이드, 또는 하드웨어 업그레이드만으로도 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들은 전자 장치에 구비된 임베디드 서버, 또는 전자 장치 외부의 서버를 통해 수행되는 것도 가능하다.
한편, 본 발명에 따른 전자 장치의 제어 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
한편, 비일시적 판독 가능 매체란 레지스터, 캐시, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100: 전자 장치
110: 통신부
120: 카메라
130: 메모리
140: 프로세서
200: 디스플레이 장치

Claims (20)

  1. 전자 장치에 있어서,
    통신부;
    카메라;
    상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기준 이미지를 저장하는 메모리; 및
    상기 카메라를 통해, 상기 기준 이미지가 출력되는 상기 디스플레이 장치 및 상기 디스플레이 장치의 배경을 촬영하고,
    상기 촬영된 이미지에 포함된 복수의 계조 영역 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 상기 촬영된 이미지의 계조 값을 보정하기 위한 보정 데이터를 획득하고,
    상기 획득된 보정 데이터에 기초하여 상기 촬영된 이미지에서 상기 배경에 대응되는 배경 이미지를 보정하고,
    상기 보정된 배경 이미지가 상기 디스플레이 장치에 출력되도록 상기 통신부를 제어하는 프로세서;를 포함하는, 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정하는, 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 픽셀 각각에 포함된 R, G, B 서브 픽셀에 대응되는 보정 데이터를 획득하고, 상기 획득된 보정 데이터에 기초하여 상기 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정하는, 전자 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 촬영된 이미지에 포함된 복수의 계조 영역의 계조 값 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득하는, 전자 장치.
  5. 제4항에 있어서,
    상기 기준 이미지는,
    상이한 계조 값을 가지는 복수의 계조 영역을 각각 포함하는 레드 영역, 그린 영역 및 블루 영역으로 구성되고,
    상기 프로세서는,
    상기 촬영된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R의 계조 값을 보정하기 위한 보정 데이터를 획득하고,
    상기 촬영된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 G의 계조 값을 보정하기 위한 보정 데이터를 획득하고,
    상기 촬영된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 B의 계조 값을 보정하기 위한 보정 데이터를 획득하는, 전자 장치.
  6. 제5항에 있어서,
    상기 프로세서는,
    상기 R에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R 서브 픽셀을 보정하고,
    상기 G에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 G 서브 픽셀을 보정하고,
    상기 B에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 B 서브 픽셀을 보정하는, 전자 장치.
  7. 제5항에 있어서,
    상기 레드 영역에 포함된 상기 복수의 계조 영역의 R의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, G 및 B의 계조 값은 서로 동일하며,
    상기 그린 영역에 포함된 상기 복수의 계조 영역의 G의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 B의 계조 값은 서로 동일하며,
    상기 블루 영역에 포함된 상기 복수의 계조 영역의 B의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 G의 계조 값은 서로 동일한, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 디스플레이 장치 주변의 조도에 기초하여, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 미만일 경우, 기설정된 계조 값 이상의 계조 구간(range)은 제외하고 상기 기설정된 계조 값 미만의 계조 구간만을 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하고, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 이상일 경우, 기설정된 계조 값 미만의 계조 구간은 제외하고 상기 기설정된 계조 값 이상의 계조 구간만을 상기 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하는, 전자 장치.
  9. 제5항에 있어서,
    상기 프로세서는,
    상기 배경 이미지에 포함된 컬러에 기초하여, 레드 영역, 그린 영역 및 블루 영역 중 상기 배경 이미지에 기설정된 비율 이상 포함된 컬러에 대응되는 영역에 포함된 복수의 계조 영역 간의 계조 값 차이가 다른 영역에 포함된 복수의 계조 영역 간의 계조 값보다 작아지도록 상기 기준 이미지를 생성하는, 전자 장치.
  10. 제9항에 있어서,
    상기 프로세서는,
    상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고,
    상기 배경 이미지에 그린 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고,
    상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    상이한 계조 값을 가지는 복수의 계조 영역을 포함하는 기저장된 기준 이미지를 디스플레이 장치로 전송하는 단계;
    상기 기준 이미지가 출력되는 상기 디스플레이 장치 및 상기 디스플레이 장치의 배경을 촬영하는 단계;
    상기 촬영된 이미지에 포함된 복수의 계조 영역 및 상기 기저장된 기준 이미지에 포함된 복수의 계조 영역에 기초하여 상기 촬영된 이미지의 계조 값을 보정하기 위한 보정 데이터를 획득하는 단계;
    상기 획득된 보정 데이터에 기초하여 상기 촬영된 이미지에서 상기 배경에 대응되는 배경 이미지를 보정하는 단계; 및
    상기 보정된 배경 이미지가 상기 디스플레이 장치에 출력되도록 상기 보정된 배경 이미지를 전송하는 단계;를 포함하는, 전자 장치의 제어 방법.
  12. 제11항에 있어서,
    상기 보정하는 단계는,
    상기 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정하는, 전자 장치의 제어 방법.
  13. 제12항에 있어서,
    상기 보정하는 단계는,
    상기 적어도 하나의 픽셀 각각에 포함된 R, G, B 서브 픽셀에 대응되는 보정 데이터를 획득하고, 상기 획득된 보정 데이터에 기초하여 상기 적어도 하나의 픽셀 각각의 R, G, B 서브 픽셀의 계조 값을 보정하는, 전자 장치의 제어 방법.
  14. 제11항에 있어서,
    상기 보정 데이터를 획득하는 단계는,
    상기 촬영된 이미지에 포함된 복수의 계조 영역의 계조 값 및 상기 저장된 기준 이미지에 포함된 복수의 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R, G, B 각각의 계조 값을 보정하기 위한 보정 데이터를 획득하는, 전자 장치의 제어 방법.
  15. 제14항에 있어서,
    상기 기준 이미지는,
    상이한 계조 값을 가지는 복수의 계조 영역을 각각 포함하는 레드 영역, 그린 영역 및 블루 영역으로 구성되고,
    상기 보정 데이터를 획득하는 단계는,
    상기 촬영된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 레드 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 R의 계조 값을 보정하기 위한 보정 데이터를 획득하고,
    상기 촬영된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 그린 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 G의 계조 값을 보정하기 위한 보정 데이터를 획득하고,
    상기 촬영된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값 및 상기 저장된 이미지에 포함된 블루 영역의 각 계조 영역의 계조 값을 비교하여, 계조 레벨 별로 상기 B의 계조 값을 보정하기 위한 보정 데이터를 획득하는, 전자 장치의 제어 방법.
  16. 제15항에 있어서,
    상기 보정하는 단계는,
    상기 R에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 R 서브 픽셀을 보정하고,
    상기 G에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 G 서브 픽셀을 보정하고,
    상기 B에 대해 획득된 보정 데이터에 기초하여 상기 배경 이미지에 포함된 적어도 하나의 픽셀 각각의 B 서브 픽셀을 보정하는, 전자 장치의 제어 방법.
  17. 제15항에 있어서,
    상기 레드 영역에 포함된 상기 복수의 계조 영역의 R의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, G 및 B의 계조 값은 서로 동일하며,
    상기 그린 영역에 포함된 상기 복수의 계조 영역의 G의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 B의 계조 값은 서로 동일하며,
    상기 블루 영역에 포함된 상기 복수의 계조 영역의 B의 계조 값은 기설정된 값만큼 단계적으로 차이가 나고, R 및 G의 계조 값은 서로 동일한, 전자 장치의 제어 방법.
  18. 제11항에 있어서,
    상기 디스플레이 장치 주변의 조도에 기초하여, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 미만일 경우, 기설정된 계조 값 이상의 계조 구간(range)은 제외하고 상기 기설정된 계조 값 미만의 계조 구간만을 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하고, 상기 디스플레이 장치 주변의 조도가 기설정된 임계 조도 이상일 경우, 기설정된 계조 값 미만의 계조 구간은 제외하고 상기 기설정된 계조 값 이상의 계조 구간만을 상기 기설정된 계조 단위로 구분하여 상기 기준 이미지를 생성하는 단계;를 더 포함하는, 전자 장치의 제어 방법.
  19. 제15항에 있어서,
    상기 배경 이미지에 포함된 컬러에 기초하여, 레드 영역, 그린 영역 및 블루 영역 중 상기 배경 이미지에 기설정된 비율 이상 포함된 컬러에 대응되는 영역에 포함된 복수의 계조 영역 간의 계조 값 차이가 다른 영역에 포함된 복수의 계조 영역 간의 계조 값보다 작아지도록 상기 기준 이미지를 생성하는 단계;를 더 포함하는, 전자 장치의 제어 방법.
  20. 제19항에 있어서,
    상기 기준 이미지를 생성하는 단계는,
    상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고,
    상기 배경 이미지에 그린 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하고,
    상기 배경 이미지에 레드 컬러가 기설정된 임계 비율 이상 포함된 경우, 상기 레드 영역에 포함된 상기 복수의 계조 영역 간의 R의 계조 값 차이가 상기 그린 영역에 포함된 상기 복수의 계조 영역 간의 G의 계조 값 차이 및 상기 블루 영역에 포함된 상기 복수의 계조 영역 간의 B의 계조 값 차이보다 작아지도록 상기 기준 이미지를 생성하는, 전자 장치의 제어 방법.
KR1020180102895A 2018-08-30 2018-08-30 전자 장치 및 그 제어 방법 KR102558290B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020180102895A KR102558290B1 (ko) 2018-08-30 2018-08-30 전자 장치 및 그 제어 방법
EP19186608.6A EP3618051B1 (en) 2018-08-30 2019-07-16 Electronic apparatus and control method thereof
PCT/KR2019/009316 WO2020045834A1 (en) 2018-08-30 2019-07-26 Electronic apparatus and control method thereof
US16/526,288 US10939083B2 (en) 2018-08-30 2019-07-30 Electronic apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180102895A KR102558290B1 (ko) 2018-08-30 2018-08-30 전자 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20200025481A true KR20200025481A (ko) 2020-03-10
KR102558290B1 KR102558290B1 (ko) 2023-07-24

Family

ID=67314691

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180102895A KR102558290B1 (ko) 2018-08-30 2018-08-30 전자 장치 및 그 제어 방법

Country Status (4)

Country Link
US (1) US10939083B2 (ko)
EP (1) EP3618051B1 (ko)
KR (1) KR102558290B1 (ko)
WO (1) WO2020045834A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024071650A1 (ko) * 2022-09-29 2024-04-04 삼성전자주식회사 균일성을 향상시키기 위한 디스플레이 장치, 전자 장치 및 그 제어 방법들

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112581539B (zh) * 2020-12-15 2023-07-18 合肥泰禾智能科技集团股份有限公司 一种灰度调节方法、装置、色选机及计算机可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170035527A (ko) * 2015-09-23 2017-03-31 삼성전자주식회사 전자 장치, 그의 디스플레이 패널 장치 보정 방법 및 보정 시스템
KR20180074405A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 전자 장치 및 이의 제어 방법

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5353121A (en) 1989-10-30 1994-10-04 Starsight Telecast, Inc. Television schedule system
JPH09128529A (ja) 1995-10-30 1997-05-16 Sony Corp ディジタル画像の雑音の投影に基づく除去方法
US6141105A (en) 1995-11-17 2000-10-31 Minolta Co., Ltd. Three-dimensional measuring device and three-dimensional measuring method
US5784498A (en) 1996-01-11 1998-07-21 Xerox Corporation System and method for synthesizing background texture in an image
JP3325765B2 (ja) * 1996-02-28 2002-09-17 京セラミタ株式会社 画像出力装置の出力階調調整方法
KR20000000145U (ko) 1998-06-03 2000-01-15 전주범 텔레비전의 테스트 패턴 표시장치
KR20000009068U (ko) 1998-10-30 2000-05-25 전주범 프로젝션 텔레비전에서 화면색 자동조정장치
US7251056B2 (en) * 2001-06-11 2007-07-31 Ricoh Company, Ltd. Image processing apparatus, image processing method and information recording medium
US7209174B2 (en) 2002-02-27 2007-04-24 Hewlett-Packard Development Company, L.P. Movable status display within a camera-back display of an image capturing device
JP2004032399A (ja) * 2002-06-26 2004-01-29 Olympus Corp 画像色再現システム、画像色再現プログラム、画像色再現方法
JP2005258162A (ja) 2004-03-12 2005-09-22 Tetsuya Akiba 映像表示方法及び室内装飾方法
JP4082393B2 (ja) * 2004-07-09 2008-04-30 セイコーエプソン株式会社 画像の特徴に応じた階調特性制御
JP4854965B2 (ja) 2005-01-07 2012-01-18 三菱電機株式会社 表示装置
JP2006333301A (ja) 2005-05-30 2006-12-07 Victor Co Of Japan Ltd テレビ通信装置
JP2007201580A (ja) 2006-01-24 2007-08-09 Eiji Shiraishi 壁掛けｔｖの存在を、未視聴時に目立たなくする一連の装置。
JP2007324974A (ja) 2006-06-01 2007-12-13 Sharp Corp テレビジョン受信機
KR101222318B1 (ko) 2006-06-09 2013-01-16 삼성전자주식회사 이동통신 단말기에서의 배경화면 변경 장치 및 변경 방법
JP2008180797A (ja) 2007-01-23 2008-08-07 Canon Inc 画像表示装置、画像表示装置の制御方法、及びコンピュータプログラム
JP2009021771A (ja) 2007-07-11 2009-01-29 Hitachi Ltd 映像調整方法
KR20090075234A (ko) 2008-01-03 2009-07-08 주식회사 대우일렉트로닉스 인테리어 효과를 가지는 텔레비전
KR101495165B1 (ko) 2008-06-03 2015-02-24 엘지전자 주식회사 이동단말기 및 그 디스플레이 제어 방법
EP2128686B1 (en) 2008-05-29 2017-07-05 LG Electronics Inc. Mobile terminal with a solar cell module integrated under the display and method for controlling the display
ATE489804T1 (de) 2008-05-29 2010-12-15 Lg Electronics Inc Transparente anzeige und betriebsverfahren dafür
US20120013646A1 (en) 2008-08-26 2012-01-19 Sharp Kabushiki Kaisha Image display device and image display device drive method
JP4427595B1 (ja) 2008-09-17 2010-03-10 株式会社東芝 映像処理装置及び映像処理方法
US20100079426A1 (en) 2008-09-26 2010-04-01 Apple Inc. Spatial ambient light profiling
JP2011048198A (ja) 2009-08-27 2011-03-10 Sharp Corp 表示装置
KR101142739B1 (ko) 2009-10-29 2012-05-03 삼성전자주식회사 검색 영역을 제한한 이미지 복원 장치 및 방법
KR20110066667A (ko) 2009-12-11 2011-06-17 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
KR20110071546A (ko) 2009-12-21 2011-06-29 삼성전자주식회사 디스플레이장치용 스탠드 및 이를 포함하는 디스플레에장치
US20120120103A1 (en) 2010-02-28 2012-05-17 Osterhout Group, Inc. Alignment control in an augmented reality headpiece
JP2011180964A (ja) 2010-03-03 2011-09-15 Kddi Corp 携帯端末機、携帯端末電話機の画面表示方法および表示プログラム
US8841099B2 (en) 2010-04-20 2014-09-23 National Research Council Of Canada Cell-based production of nonulosonates
US20120038663A1 (en) 2010-08-12 2012-02-16 Harald Gustafsson Composition of a Digital Image for Display on a Transparent Screen
US20120135783A1 (en) 2010-11-29 2012-05-31 Google Inc. Mobile device image feedback
KR20120063987A (ko) 2010-12-08 2012-06-18 고현빈 디지털 창문
US9201467B2 (en) 2011-01-26 2015-12-01 Sony Corporation Portable terminal having user interface function, display method, and computer program
JP2012155556A (ja) 2011-01-26 2012-08-16 Sony Computer Entertainment Inc 携帯端末、表示方法及びコンピュータプログラム
US10606066B2 (en) 2011-06-21 2020-03-31 Gholam A. Peyman Fluidic light field camera
KR20130006878A (ko) 2011-06-24 2013-01-18 (주)터보소프트 스마트 기기에서의 기초마커를 이용한 객체 이미지 복원 방법 및 그 기초마커를 이용하여 객체이미지를 복원하는 스마트 기기
EP2570986A1 (en) 2011-09-13 2013-03-20 Alcatel Lucent Method for creating a cover for an electronic device and electronic device
JP2013168922A (ja) 2012-01-18 2013-08-29 Sony Corp 投影型画像表示装置及び画像投影方法、並びにコンピューター・プログラム
US20130265306A1 (en) 2012-04-06 2013-10-10 Penguin Digital, Inc. Real-Time 2D/3D Object Image Composition System and Method
KR20140028558A (ko) 2012-08-29 2014-03-10 삼성디스플레이 주식회사 투명 표시장치 및 이의 구동방법
JP6418449B2 (ja) 2012-11-02 2018-11-07 ソニー株式会社 画像処理装置および画像処理方法、並びにプログラム
EP3664427A1 (en) * 2012-11-16 2020-06-10 Canon Kabushiki Kaisha Color image processing apparatus, control method therefor, and program for executing image processing method
KR20140070120A (ko) * 2012-11-30 2014-06-10 삼성전자주식회사 디스플레이 장치의 색 보정 장치 및 그 보정 방법
JP6075049B2 (ja) 2012-12-12 2017-02-08 パナソニックＩｐマネジメント株式会社 手すり部品梱包材
US9076221B2 (en) 2012-12-19 2015-07-07 Qualcomm Incorporated Removing an object from an image
KR102051656B1 (ko) 2013-01-22 2019-12-03 삼성전자주식회사 투명 디스플레이 장치 및 그 디스플레이 방법
JPWO2014128822A1 (ja) * 2013-02-19 2017-02-02 株式会社イクス 補正データ生成方法、補正データ生成システム及びこれらを用いた画質調整技術
KR20140112918A (ko) 2013-03-14 2014-09-24 삼성전자주식회사 온도 및 습도를 이용한 화면 표시 제어 장치 및 방법
KR20140122458A (ko) 2013-04-10 2014-10-20 삼성전자주식회사 휴대 단말 장치의 화면 표시 방법 및 장치
US10120541B2 (en) 2013-06-09 2018-11-06 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
US9712577B2 (en) 2013-06-09 2017-07-18 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
JP6108994B2 (ja) 2013-07-04 2017-04-05 オリンパス株式会社 画像処理装置、撮像装置、および画像処理用プログラム
WO2015056932A1 (en) 2013-10-17 2015-04-23 Samsung Electronics Co., Ltd. Display device and calibration method thereof
CN103559007B (zh) 2013-10-17 2017-05-10 三星电子（中国）研发中心 动态生成屏幕壁纸的方法和装置
KR20150054059A (ko) 2013-11-08 2015-05-20 이정용 보이지 않는 led tv 거치대
US20150145887A1 (en) 2013-11-25 2015-05-28 Qualcomm Incorporated Persistent head-mounted content display
US9965999B1 (en) 2014-06-26 2018-05-08 Amazon Technologies, Inc. Adjusting display color based on brightness
KR20160002461A (ko) 2014-06-30 2016-01-08 주식회사 비즈모델라인 사물 디스플레이를 구현하는 인테리어장치
KR102152819B1 (ko) 2014-07-08 2020-09-07 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR102127356B1 (ko) 2014-07-31 2020-06-26 삼성전자주식회사 투명 디스플레이 장치 및 그 제어 방법
JP6320246B2 (ja) 2014-08-29 2018-05-09 花王株式会社 包装箱及び包装商品
TWM500266U (zh) 2014-10-03 2015-05-01 Innolux Corp 顯示模組
JP2016085234A (ja) 2014-10-22 2016-05-19 三星ディスプレイ株式會社Ｓａｍｓｕｎｇ Ｄｉｓｐｌａｙ Ｃｏ．，Ｌｔｄ． 画像処理装置、画像処理方法、コンピュータプログラム及び画像表示装置
KR20160074288A (ko) * 2014-12-18 2016-06-28 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN104639748B (zh) 2015-01-30 2017-10-24 努比亚技术有限公司 基于无边框手机的桌面背景显示方法及装置
CN105991968A (zh) 2015-02-04 2016-10-05 夏普株式会社 显示设备伪装/恢复系统和控制方法
JP6336930B2 (ja) 2015-02-16 2018-06-06 富士フイルム株式会社 仮想オブジェクト表示装置、方法、プログラムおよびシステム
CN104822089B (zh) 2015-04-07 2019-04-30 深圳创维数字技术有限公司 一种电视机顶盒的安装引导方法及装置
WO2017066278A1 (en) 2015-10-13 2017-04-20 Elateral, Inc. In-situ previewing of customizable communications
KR102034548B1 (ko) 2016-10-10 2019-10-21 삼성전자주식회사 전자 장치 및 이의 제어 방법
KR20180050847A (ko) 2016-11-07 2018-05-16 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
EP3494458B1 (en) 2016-12-14 2021-12-01 Samsung Electronics Co., Ltd. Display apparatus and method for controlling the display apparatus
KR102665125B1 (ko) * 2016-12-21 2024-05-13 삼성전자주식회사 디스플레이 장치, 전자 장치, 이들을 포함하는 디스플레이 시스템 및 그 제어 방법
CN110036365B (zh) * 2016-12-14 2022-09-20 三星电子株式会社 显示装置及其控制方法
WO2018117446A1 (en) 2016-12-20 2018-06-28 Samsung Electronics Co., Ltd. Display apparatus and display method thereof
KR102583929B1 (ko) 2017-02-24 2023-10-04 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
WO2018207984A1 (en) 2017-05-12 2018-11-15 Samsung Electronics Co., Ltd. Electronic apparatus and method for displaying a content screen on the electronic apparatus thereof
US10122969B1 (en) 2017-12-07 2018-11-06 Microsoft Technology Licensing, Llc Video capture systems and methods

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170035527A (ko) * 2015-09-23 2017-03-31 삼성전자주식회사 전자 장치, 그의 디스플레이 패널 장치 보정 방법 및 보정 시스템
KR20180074405A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 전자 장치 및 이의 제어 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024071650A1 (ko) * 2022-09-29 2024-04-04 삼성전자주식회사 균일성을 향상시키기 위한 디스플레이 장치, 전자 장치 및 그 제어 방법들

Also Published As

Publication number Publication date
US20200077068A1 (en) 2020-03-05
EP3618051B1 (en) 2023-11-15
EP3618051A1 (en) 2020-03-04
US10939083B2 (en) 2021-03-02
WO2020045834A1 (en) 2020-03-05
KR102558290B1 (ko) 2023-07-24

Similar Documents

Publication Publication Date Title
KR102545813B1 (ko) 디스플레이 장치 및 디스플레이 방법
US10635373B2 (en) Display apparatus and method of controlling the same
JP6768940B2 (ja) 電子装置及びその制御方法
US9672603B2 (en) Image processing apparatus, image processing method, display apparatus, and control method for display apparatus for generating and displaying a combined image of a high-dynamic-range image and a low-dynamic-range image
US11082614B2 (en) Display apparatus configured to display an image harmonized with an installation space, and an associated system and recording medium
US11128909B2 (en) Image processing method and device therefor
KR20180074405A (ko) 전자 장치 및 이의 제어 방법
CN109997354B (zh) 显示装置及其控制方法
US10939083B2 (en) Electronic apparatus and control method thereof
KR102308192B1 (ko) 디스플레이 장치 및 그 제어 방법
KR102246954B1 (ko) 영상 처리 장치 및 그 영상 처리 방법
KR20210105636A (ko) 전자장치 및 그 제어방법
CN116259281A (zh) 一种显示设备及背光控制方法
US10949704B2 (en) Electronic apparatus and control method thereof
US20190373167A1 (en) Spotlight detection for improved image quality
KR102604170B1 (ko) 전자 장치 및 그 제어 방법
KR20200031470A (ko) 전자 장치 및 그 제어 방법
EP4339937A1 (en) Display device and control method thereof
KR20180028758A (ko) 디스플레이장치 및 그 제어방법
KR20230020303A (ko) 디스플레이 장치 및 그 제어 방법
KR20230166728A (ko) 전자 장치 및 그 제어 방법
KR20230055264A (ko) 디스플레이 장치 및 그 제어 방법
KR20180128194A (ko) 전자 장치 및 그 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant