KR20200035556A - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20200035556A
KR20200035556A KR1020180114719A KR20180114719A KR20200035556A KR 20200035556 A KR20200035556 A KR 20200035556A KR 1020180114719 A KR1020180114719 A KR 1020180114719A KR 20180114719 A KR20180114719 A KR 20180114719A KR 20200035556 A KR20200035556 A KR 20200035556A
Authority
KR
South Korea
Prior art keywords
pattern
image
color
display device
clustered
Prior art date
Application number
KR1020180114719A
Other languages
English (en)
Other versions
KR102604170B1 (ko
Inventor
김병현
박영인
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020180114719A priority Critical patent/KR102604170B1/ko
Priority to EP19186912.2A priority patent/EP3629229A1/en
Priority to US16/526,174 priority patent/US11113850B2/en
Priority to PCT/KR2019/010356 priority patent/WO2020067645A1/en
Publication of KR20200035556A publication Critical patent/KR20200035556A/ko
Application granted granted Critical
Publication of KR102604170B1 publication Critical patent/KR102604170B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/74—Circuits for processing colour signals for obtaining special effects

Abstract

전자 장치가 개시된다. 본 전자 장치는 통신부, 카메라 및 카메라를 통해 디스플레이 장치를 포함하는 이미지를 촬영하고, 이미지에서 디스플레이 장치를 식별하며, 이미지에서 디스플레이 장치에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 적어도 하나의 패턴 중 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 이미지에 대응되는 패턴을 획득하고, 나머지 영역의 컬러를 적어도 하나의 컬러로 군집화하며, 군집화 된 적어도 하나의 컬러를 획득된 패턴에 적용하여 생성한 이미지가 디스플레이 장치에 출력되도록 통신부를 제어하는 프로세서를 포함한다.

Description

전자 장치 및 그 제어 방법 {ELECTRONIC APPARATUS AND THE CONTROL METHOD THEREOF}
본 개시는 전자 장치 및 그 제어 방법에 관한 것으로, 보다 상세하게는 디스플레이 장치에 이미지가 출력되도록 제어하는 전자 장치 및 그 제어 방법에 관한 것이다.
최근 전자 기술의 발달로 다양한 사용자 경험을 제공하는 전자 장치가 개발되고 있다. 특히, 최근에는 대기 모드에서, 사용자에 의해 선택된 사진 등을 표시할 수 있는 디스플레이 장치가 개발되고 있다.
그런데, 이와 같은 사진 등은 디스플레이 장치 주변의 색상, 패턴 등과 아무런 관련이 없는 것이 일반적이다. 이 경우, 디스플레이 장치가 위치하는 영역은 디스플레이 장치의 주변 영역과 시각적으로 분리되어 사용자는 이질감을 느끼게 된다.
본 개시는 상술한 문제점을 해결하기 위해 안출된 것으로, 본 개시의 목적은 디스플레이 장치의 주변 영역과 조화되는 이미지를 디스플레이 장치에 출력하여, 사용자가 디스플레이 장치가 위치하는 영역과 디스플레이 장치의 주변 영역에 대해 시각적으로 이질감을 느끼지 않도록 함에 있다.
상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 전자 장치는 통신부, 카메라 및 상기 카메라를 통해 디스플레이 장치를 포함하는 이미지를 촬영하고, 상기 이미지에서 상기 디스플레이 장치를 식별하며, 상기 이미지에서 상기 디스플레이 장치에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 상기 적어도 하나의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 상기 이미지에 대응되는 패턴을 획득하고, 상기 나머지 영역의 컬러를 적어도 하나의 컬러로 군집화하며, 상기 군집화 된 적어도 하나의 컬러를 상기 획득된 패턴에 적용하여 생성한 이미지가 상기 디스플레이 장치에 출력되도록 상기 통신부를 제어하는 프로세서를 포함한다.
여기에서, 상기 프로세서는, 상기 디스플레이 장치를 기준으로, 서로 다른 방향에 위치하는 각 영역의 패턴을 분석하고, 상기 각 영역의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴 및 상기 기설정된 비율 이상 포함된 패턴의 위치에 기초하여, 상기 이미지에 대응되는 패턴을 획득하고, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 프로세서는, 상기 디스플레이 장치를 기준으로, 상기 서로 다른 방향에 위치하는 각 영역의 컬러를 분석하고, 상기 각 영역의 컬러 간의 유사도에 기초하여, 상기 촬영된 이미지에 포함된 컬러를 군집화하고, 상기 디스플레이 장치를 기준으로 상기 군집화된 컬러가 위치하는 영역에 기초하여, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 프로세서는, 기저장된 복수의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 상기 이미지에 대응되는 패턴으로 획득할 수 있다.
그리고, 상기 프로세서는, 상기 이미지에 상기 기저장된 복수의 패턴과 상이한 패턴이 포함된 경우, 상기 상이한 패턴의 컬러를 추가로 군집화하며, 상기 군집화 된 적어도 하나의 컬러 및 상기 추가로 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 프로세서는, 픽셀 단위로 상기 촬영된 이미지에 포함된 컬러를 분석하고, 상기 이미지에 포함된 복수의 픽셀 중 상기 컬러 간의 유사도가 기설정된 임계 값 이상인 픽셀을 군집화 할 수 있다.
그리고, 상기 프로세서는, 상기 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 상기 기설정된 비율 이상 차지하는 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 프로세서는, 상기 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 프로세서는, 상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 상기 비율이 높은 군집화 된 컬러를 상기 비율이 낮은 군집화 된 컬러보다 상기 획득된 패턴에 상대적으로 많이 적용할 수 있다.
그리고, 상기 프로세서는, 상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 기설정된 비율 이상 차지하는 군집화된 컬러가 있을 경우, 상기 군집화 된 컬러 각각의 비율을 조정하고, 상기 비율이 조정된 군집화 된 컬러 각각을 상기 획득된 패턴에 적용할 수 있다.
한편, 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법은 디스플레이 장치를 포함하는 이미지를 촬영하는 단계, 상기 이미지에서 상기 디스플레이 장치를 식별하는 단계, 상기 이미지에서 상기 디스플레이 장치에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 상기 적어도 하나의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 상기 이미지에 대응되는 패턴을 획득하는 단계, 상기 나머지 영역의 컬러를 적어도 하나의 컬러로 군집화하는 단계 및 상기 군집화 된 적어도 하나의 컬러를 상기 획득된 패턴에 적용하여 생성한 이미지가 상기 디스플레이 장치에 출력되도록 제어하는 단계를 포함한다.
여기에서, 상기 적용하는 단계는, 상기 디스플레이 장치를 기준으로, 서로 다른 방향에 위치하는 각 영역의 패턴을 분석하고, 상기 각 영역의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴 및 상기 기설정된 비율 이상 포함된 패턴의 위치에 기초하여, 상기 이미지에 대응되는 패턴을 획득하고, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 적용하는 단계는, 상기 디스플레이 장치를 기준으로, 상기 서로 다른 방향에 위치하는 각 영역의 컬러를 분석하고, 상기 각 영역의 컬러 간의 유사도에 기초하여, 상기 촬영된 이미지에 포함된 컬러를 군집화하고, 상기 디스플레이 장치를 기준으로 상기 군집화된 컬러가 위치하는 영역에 기초하여, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 획득하는 단계는, 기저장된 복수의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 상기 이미지에 대응되는 패턴으로 획득할 수 있다.
그리고, 상기 획득하는 단계는, 상기 이미지에 상기 기저장된 복수의 패턴과 상이한 패턴이 포함된 경우, 상기 상이한 패턴의 컬러를 추가로 군집화하며, 상기 군집화 된 적어도 하나의 컬러 및 상기 추가로 군집화 된 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 군집화하는 단계는, 픽셀 단위로 상기 촬영된 이미지에 포함된 컬러를 분석하고, 상기 이미지에 포함된 복수의 픽셀 중 상기 컬러 간의 유사도가 기설정된 임계 값 이상인 픽셀을 군집화 할 수 있다.
그리고, 상기 적용하는 단계는, 상기 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 상기 기설정된 비율 이상 차지하는 컬러를 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 적용하는 단계는, 상기 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 상기 획득된 패턴에 적용할 수 있다.
그리고, 상기 적용하는 단계는, 상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 상기 비율이 높은 군집화 된 컬러를 상기 비율이 낮은 군집화 된 컬러보다 상기 획득된 패턴에 상대적으로 많이 적용할 수 있다.
그리고, 상기 적용하는 단계는, 상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 기설정된 비율 이상 차지하는 군집화된 컬러가 있을 경우, 상기 군집화 된 컬러 각각의 비율을 조정하고, 상기 비율이 조정된 군집화 된 컬러 각각을 상기 획득된 패턴에 적용할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 디스플레이 장치는 디스플레이 장치의 주변 영역과 조화되는 이미지를 출력할 수 있다. 이에 따라, 디스플레이 장치는 인테리어적 요소로 기능할 수 있고, 사용자는 마치 디스플레이 장치가 없는 듯한 경험을 할 수 있다.
도 1은 본 개시의 일 실시 예에 따른 전자 시스템을 설명하기 위한 블록도이다.
도 2는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 블록도이다.
도 3은 본 개시의 일 실시 예에 따른 디스플레이 장치를 촬영하는 전자 장치를 설명하기 위한 도면이다.
도 4 및 도 5는 본 개시의 일 실시 예에 따른 디스플레이 장치 및 디스플레이 장치의 주변 영역을 식별하는 실시 예를 설명하기 위한 도면이다.
도 6은 본 개시의 일 실시 예에 따른 디스플레이 장치 및 디스플레이 장치의 주변 영역이 식별된 실시 예를 설명하기 위한 도면이다.
도 7은 본 개시의 일 실시 예에 따른 디스플레이 장치를 제외한 나머지 영역의 패턴을 분석하는 실시 예를 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른 촬영된 이미지에 대응되는 패턴을 설명하기 위한 도면이다.
도 9 및 도 10은 본 개시의 일 실시 예에 따른 촬영된 이미지에 대응되는 패턴을 설명하기 위한 도면이다.
도 11은 본 개시의 일 실시 예에 따른 촬영된 이미지에 포함된 컬러를 군집화 하는 실시 예를 설명하기 위한 도면이다.
도 12는 본 개시의 일 실시 예에 따른 군집화 된 컬러를 획득된 패턴에 적용하여 생성된 이미지를 설명하기 위한 도면이다.
도 13은 본 개시의 일 실시 예에 따른 시각화 이미지가 표시된 디스플레이 장치를 설명하기 위한 도면이다.
도 14는 본 개시의 일 실시 예에 따른 디스플레이 장치의 주변 영역에 포함된 패턴의 위치를 판단하는 실시 예를 설명하기 위한 도면이다.
도 15는 본 개시의 일 실시 예에 따른 촬영된 이미지에 포함된 패턴의 위치에 기초하여 획득된 패턴을 설명하기 위한 도면이다.
도 16은 본 개시의 일 실시 예에 촬영된 이미지에 포함된 군집의 위치를 판단하는 실시 예를 설명하기 위한 도면이다.
도 17은 본 개시의 일 실시 예에 따른 군집의 위치에 기초하여, 군집화 된 컬러를 획득된 패턴에 적용하는 실시 예를 설명하기 위한 도면이다.
도 18 및 도 19는 본 개시의 일 실시 예에 따른 촬영된 이미지에 대응되는 패턴을 획득하는 실시 예를 설명하기 위한 도면이다.
도 20 및 도 21은 본 개시의 일 실시 예에 따른 패턴에 군집화 된 컬러를 적용하는 실시 예를 설명하기 위한 도면이다.
도 22 및 도 23은 본 개시의 일 실시 예에 따른 촬영된 위치에 따라 상이한 패턴을 획득하는 실시 예를 설명하기 위한 도면이다.
도 24a 및 도 24b는 본 개시의 일 실시 예에 따른 컬러를 군집화 하는 실시 예를 설명하기 위한 도면이다.
도 25는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 상세 블록도이다.
도 26은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 상세 블록도이다.
도 27은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 순서도이다.
먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 개시의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어도 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그에 대한 상세한 설명은 축약하거나 생략한다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 개시의 실시 예를 상세하게 설명하지만, 본 개시가 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 개시를 상세히 설명한다.
도 1은 본 개시의 일 실시 예에 따른 전자 시스템을 설명하기 위한 블록도이다.
도 1을 참조하면, 본 개시의 일 실시 예에 따른 전자 시스템(10)은 전자 장치(100) 및 디스플레이 장치(200)를 포함할 수 있다.
전자 장치(100)는 도 1에 도시된 바와 같이, 스마트 폰 등과 같은 사용자 단말 장치가 될 수 있다. 다만, 이는 일 실시 예에 불과할 뿐, 전자 장치(100)는 캠코더, 태블릿 PC, 스마트 워치 등 카메라를 구비한 다양한 전자 장치로 구현될 수 있다.
디스플레이 장치(200)는 도 1에 도시된 바와 같이, 스마트 TV가 될 수 있다. 다만, 이는 일 실시 예에 불과할 뿐, 디스플레이 장치(200)는 디지털 TV, 데스크톱 PC, 키오스크 등 디스플레이를 구비한 다양한 전자 장치로 구현될 수 있다.
전자 장치(100) 및 디스플레이 장치(200)는 통신을 수행하여 다양한 데이터를 송수신할 수 있다.
특히, 전자 장치(100)는 디스플레이 장치(200) 주변의 패턴 및 색상 중 적어도 하나에 기초하여 생성된 이미지를 디스플레이 장치(200)로 전송할 수 있다.
이를 위해, 전자 장치(100)는 디스플레이 장치(200)가 설치된 영역을 촬영하여, 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역이 포함된 이미지를 획득할 수 있다.
그리고, 전자 장치(100)는 촬영된 이미지를 분석하여 디스플레이 장치(200)가 위치하는 영역과 디스플레이 장치(200)의 주변 영역을 식별할 수 있다.
그리고, 전자 장치(100)는 주변 영역에 포함된 패턴 및 색상 중 적어도 하나에 기초하여 이미지를 생성할 수 있다.
여기에서, 생성된 이미지는 디스플레이 장치(200)의 주변 영역과 조화되는 이미지로써, 디스플레이 장치(200)의 화면을 통해 출력될 수 있다. 이하, 설명의 편의를 위해 이와 같은 이미지를 시각화 이미지라 명명하여 설명한다.
이와 같은 시각화 이미지가 디스플레이 장치(200)에 표시될 때, 디스플레이 장치는 인테리어적 요소로 기능할 수 있고, 사용자는 디스플레이 장치가 위치하는 영역과 디스플레이 장치의 주변 영역에 대해 시각적으로 이질감을 느끼지 않고, 마치 디스플레이 장치가 없는 듯한 경험을 할 수 있다. 이와 관련된 상세한 설명은 후술한다.
한편, 이상에서는 전자 장치(100) 및 디스플레이 장치(200)가 직접적으로 통신을 수행하는 것으로 설명하였으나, 본 개시가 반드시 이에 한정되는 것은 아니다.
구체적으로, 전자 장치(100)는 외부 장치(미도시)를 통해서 디스플레이 장치(200)와 통신을 수행할 수도 있다. 여기에서, 외부 장치(미도시)는 셋톱박스가 될 수 있음은 물론, 전자 장치(100) 및 디스플레이 장치(200)간 통신을 중계하는 AP, 라우터 등 다양한 중계 기기가 될 수 있다. 또는, 외부 장치(미도시)는 외부 서버가 될 수도 있다.
일 예로, 전자 장치(100)는 외부 장치(미도시)와 통신하여, 외부 장치(미도시)로 시각화 이미지를 전송하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 시각화 이미지를 수신하여 디스플레이 할 수 있다.
도 2는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 블록도이다.
도 2를 참조하면, 본 개시의 일 실시 예에 따른 전자 장치(100)는 통신부(110), 카메라(120) 및 프로세서(130)를 포함할 수 있다.
통신부(110)는 디스플레이 장치(200)와 통신을 수행하여 다양한 데이터를 송수신할 수 있다.
특히, 통신부(110)는 디스플레이 장치(200) 주변의 패턴 및 색상 중 적어도 하나에 기초하여 생성된 시각화 이미지를 디스플레이 장치(200)로 전송할 수 있다.
이를 위해, 통신부(110)는 무선 통신 칩, 와이 파이 칩, 블루투스 칩 등을 포함할 수 있다.
카메라(120)는 다양한 피사체를 촬영할 수 있다.
특히, 카메라(120)는 디스플레이 장치(200)가 설치된 영역을 촬영할 수 있다. 여기에서, 디스플레이 장치(200)는 벽면의 일 영역에 액자 형태로 설치되거나, 벽면 전방에 스탠드 형태로 설치될 수 있다. 이에 따라, 카메라(120)에 의해 촬영된 이미지에는 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역이 포함될 수 있다.
카메라(120)는 복수의 카메라 모듈을 가지는 듀얼 카메라라고 구현될 수 있다. 다만, 이는 일 실시 예일 뿐, 카메라(120)는 하나의 카메라 모듈로 구현될 수도 있다.
프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어한다. 이를 위해, 프로세서(130)는 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다.
이하, 도 3 내지 도 13를 참조하여 프로세서(140)의 동작에 관해 구체적으로 설명한다.
도 3은 본 개시의 일 실시 예에 따른 디스플레이 장치를 촬영하는 전자 장치를 설명하기 위한 도면이다.
도 3을 참조하면, 프로세서(130)는 카메라(120)를 통해, 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변을 포함하는 영역을 촬영할 수 있다.
도 3에 도시된 바와 같이, 촬영된 이미지에는, 디스플레이 장치(200), 디스플레이 장치(200) 주변의 액자(311, 312, 313) 및 테이블(320) 등이 포함될 수 있다.
구체적으로, 프로세서(130)는 카메라 제어를 위한 사용자 입력이 수신되면, 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변을 포함하는 영역을 촬영할 수 있다.
여기에서, 카메라 제어를 위한 사용자 입력은 다양한 방법에 의해 수행될 수 있다. 예를 들어, 카메라 제어를 위한 사용자 입력은 터치 스크린에 입력된 터치가 될 수 있고, 전자 장치(100)의 마이크(미도시)에 입력된 사용자 음성이 될 수 있다.
프로세서(130)는 촬영된 이미지에서 디스플레이 장치(200)에 대응되는 영역을 제외한 나머지 영역의 패턴 및 컬러를 분석할 수 있다.
이를 위해, 프로세서(130)는 먼저 촬영된 이미지에서 디스플레이 장치(200) 및 디스플레이 장치(200)를 제외한 나머지 영역, 즉 디스플레이 장치(200)의 주변 영역을 식별할 수 있다.
도 4 및 도 5는 본 개시의 일 실시 예에 따른 디스플레이 장치 및 디스플레이 장치의 주변 영역을 식별하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 촬영된 이미지에서 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 식별할 수 있다.
이를 위해, 프로세서(130)는 카메라 어플리케이션이 실행되면 도 4에 도시된 바와 같이 가이드 UI(411)를 표시할 수 있다. 여기에서, 가이드 UI(411)는 디스플레이 장치(200)의 화면이 특정 영역에 포함될 수 있도록 가이드 하기 위한 UI가 될 수 있다.
이후, 프로세서(130)는 사용자 명령에 따라 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 포함하는 이미지가 촬영되면, 촬영된 이미지를 분석하여, 가이드 UI(411)에 포함된 영역은 디스플레이 장치(200)가 위치하는 영역이고, 그 외 영역은 디스플레이 장치(200)의 주변 영역인 것으로 식별할 수 있다.
구체적으로, 프로세서(130)는 가이드 UI를 통해 디스플레이 장치(200)의 외곽 부분을 추출한 뒤, 추출된 외곽 부분에 포함된 영역을 디스플레이 장치(200)가 위치하는 영역으로 식별하고, 그 외 영역을 디스플레이 장치(200)의 주변 영역인 것으로 식별할 수 있다.
다른 실시 예로, 프로세서(130)는 디스플레이 장치(200)에 표시된 마커를 이용하여 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 식별할 수 있다.
프로세서(130)는 사용자 명령에 따라, 마커를 출력하도록 디스플레이 장치(200)를 제어할 수 있다. 구체적으로, 프로세서(130)는 마커를 출력하기 위한 사용자 명령이 수신되면, 마커 출력을 요청하는 신호를 디스플레이 장치(200)로 전송할 수 있다. 또는, 프로세서(130)는 마커 출력을 요청하는 신호를 셋톱박스 등의 외부 장치(미도시)로 전송하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 수신된 마커 출력을 요청하는 신호에 기초하여, 마커를 출력할 수도 있다.
이 경우, 도 5를 참조하면, 디스플레이 장치(200)는 화면의 각 모서리 영역에 마커(511 내지 514)를 표시할 수 있다.
그리고, 프로세서(130)는 카메라(120)를 통해 도 5에 도시된 바와 같이 4개의 마커(511' 내지 514')가 표시된 디스플레이 장치(200)를 포함하는 이미지를 촬영할 수 있다.
이후, 프로세서(130)는 촬영된 이미지에 포함된 4개의 마커(511' 내지 514')를 이용하여 디스플레이 장치(200)의 외곽 부분을 추출한 뒤, 추출된 외곽 부분에 포함된 영역을 디스플레이 장치(200)가 위치하는 영역으로 식별하고, 그 외 영역을 디스플레이 장치(200)의 주변 영역으로 식별할 수 있다.
한편, 상술한 실시 예는 일 실시 예로써, 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 식별하는 방법이 반드시 이에 한정되는 것은 아니다.
예를 들어, 프로세서(130)는 카메라(120)를 통해 촬영된 영상에 오브젝트 인식 알고리즘을 적용하여 사각 모양의 오브젝트를 인식하고, 인식된 오브젝트 중 기설정된 비율(가령, 가로 및 세로의 비율이 16:9)인 오브젝트를 디스플레이 장치(200)가 위치하는 영역으로 식별하고, 그 외 영역을 디스플레이 장치(200)의 주변 영역으로 식별할 수도 있다.
이에 따라, 도 6에 도시된 바와 같이, 프로세서(130)는 촬영된 이미지에서 디스플레이 장치(200)가 위치하는 영역(610) 및 디스플레이 장치(200)를 제외한 나머지 영역(620) 각각을 식별할 수 있다.
도 7은 본 개시의 일 실시 예에 따른 디스플레이 장치를 제외한 나머지 영역의 패턴을 분석하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 촬영된 이미지에서 디스플레이 장치(200)에 대응되는 영역을 제외한 나머지 영역의 패턴을 분석할 수 있다.
이를 위해, 프로세서(130)는 먼저 오브젝트 인식 알고리즘을 통해 디스플레이 장치(200)의 주변 영역의 오브젝트를 인식할 수 있다.
여기에서, 오브젝트 인식 알고리즘은 이미지에 포함된 윤곽선을 검출하여, 오브젝트의 크기 및 모양 등을 인식할 수 있는 기술을 의미한다. 다만, 이는 일 실시 예일 뿐, 오브젝트를 인식하는 방법이 이에 제한되는 것은 아니라 할 것이다. 가령, 오브젝트 인식은 딥 러닝(deep learning)에 기반한 딥 뉴럴 네트워크(deep neural network)를 통해 수행될 수도 있다.
도 7을 참조하면, 프로세서(130)는 오브젝트 인식 알고리즘을 통해, 직사각형 오브젝트(711, 712, 713), 사다리꼴 오브젝트(714) 및 가로 줄무늬 오브젝트(715 내지 718)를 인식할 수 있다.
그리고, 프로세서(130)는 디스플레이 장치(200)의 인식된 오브젝트에 기초하여, 디스플레이 장치(200)의 주변 영역의 패턴을 판단할 수 있다.
구체적으로, 특정 형태의 오브젝트가 기설정된 개수 이상 존재하는 경우, 프로세서(130)는 해당 형태를 디스플레이 장치(200)의 주변 영역의 패턴으로 판단할 수 있다. 여기에서, 기설정된 개수는 제품 출시 단계에서 설정될 수 있음은 물론, 이후 사용자 명령에 따라 변경될 수 있다. 기설정된 개수는 3개, 5개 등 다양하게 설정될 수 있다.
본 실시 예에서, 기설정된 개수가 3개라고 가정하면, 프로세서(130)는 직사각형 오브젝트(711, 712, 713)가 3개 이고, 가로 줄무늬 오브젝트(715 내지 718)가 4개이므로, 디스플레이 장치(200)의 주변 영역은 직사각형 패턴 및 가로 줄무늬 패턴인 것으로 분석할 수 있다.
이후, 프로세서(130)는 디스플레이 장치(200) 주변 영역의 패턴 중, 촬영된 이미지에 기설정된 비율 이상 포함된 패턴을 판단할 수 있다.
여기에서, 기설정된 비율은 제품 출시 단계에서 설정될 수 있음은 물론, 이후 사용자 명령에 따라 변경될 수 있다. 기설정된 비율은 30%, 50% 등 다양하게 설정될 수 있다.
예를 들어, 기설정된 비율이 50%이고, 디스플레이 장치(200)의 주변 영역에 직사각형 패턴이 50%, 가로 줄무늬 패턴이 30% 비율로 포함된 경우, 프로세서(130)는 촬영된 이미지에서 직사각형 패턴이 기설정된 비율 이상 포함된 패턴인 것으로 판단할 수 있다.
그리고, 프로세서(130)는 촬영된 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 촬영된 이미지에 대응되는 패턴을 획득할 수 있다.
구체적으로, 프로세서(130)는 기저장된 복수의 패턴 중 촬영된 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
이를 위해, 프로세서(130)는 먼저 기저장된 복수의 패턴과 촬영된 이미지에 기설정된 비율 이상 포함된 패턴의 유사도를 판단할 수 있다. 여기에서, 유사도는 패턴의 형태간 비교에 의해 결정될 수 있다.
예를 들어, 사각형 패턴, 가로 줄무늬 패턴 및 세로 줄무늬 패턴 등이 기저장되어 있고, 본 실시 예와 같이 직사각형 패턴이 촬영된 이미지에 기설정된 비율 이상 포함된 것으로 판단된 경우, 프로세서(130)는 기저장된 복수의 패턴 형태인 사각형, 가로 줄무늬 및 세로 줄무늬 각각을 촬영된 이미지에 기설정된 비율 이상 포함된 패턴의 형태인 직사각형과 비교할 수 있다.
그리고, 프로세서(130)는 기저장된 사각형 패턴이 촬영된 이미지에 기설정된 비율 이상 포함된 직사각형 패턴과 상대적으로 유사도가 가장 높은 것으로 판단되면, 기저장된 사각형 패턴을 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
예를 들어, 프로세서(130)는 도 8과 같은 사각형 패턴을 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
한편, 여기서는 기저장된 패턴 중 일 패턴이 촬영된 이미지에 대응되는 패턴으로 획득되는 것으로 설명하였으나, 패턴은 전자 장치(100)에 의해 생성된 패턴이 될 수도 있다. 구체적으로, 프로세서(130)는 촬영된 이미지에 기설정된 비율 이상 포함된 패턴이 판단되면, 해당 패턴을 복수 개 조합한 새로운 패턴을 생성할 수 있다.
또한, 여기서는 전자 장치(100에 의해 촬영된 이미지에 대응되는 패턴을 획득하는 실시 예를 설명하였으나, 이는 일 실시 예일 뿐 이다.
다른 예로, 촬영된 이미지에 대응되는 패턴은 외부 서버(미도시)로부터 획득될 수도 있다. 구체적으로, 프로세서(130)는 촬영된 이미지 또는 디스플레이 장치(200)를 제외한 나머지 영역이 포함된 이미지를 외부 서버(미도시)로 전송하고, 촬영된 이미지에 대응되는 패턴은 외부 서버(미도시)에 의해 분석되어, 전자 장치(100)로 전송될 수 있다.
또한, 여기서는 사각형 패턴이 촬영된 이미지에 대응되는 패턴으로 획득되는 것으로 설명하였으나, 촬영된 이미지에 대응되는 패턴이 이에 제한되는 것은 아니다.
예를 들어, 도 9에 도시된 바와 같이, 디스플레이 장치(200)의 주변 영역에 세로 줄무늬 패턴이 기설정된 비율 이상 포함된 경우, 프로세서(130)는 도 10에 도시된 바와 같이 세로 줄무늬 패턴을 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
이 외에도, 촬영된 이미지에 대응되는 패턴은, 촬영된 이미지에 기설정된 비율 이상 포함되는 패턴(가령, 동그라미 패턴, 세모 패턴, 곡선 패턴 등)에 따라 다양하게 획득될 수 있다.
도 11은 본 개시의 일 실시 예에 따른 촬영된 이미지에 포함된 컬러를 군집화 하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 디스플레이 장치(200)의 주변 영역의 컬러를 군집화 할 수 있다. 구체적으로, 프로세서(130)는 디스플레이 장치(200)의 주변 영역의 컬러를, 각 컬러간의 유사도에 기초하여 군집화 할 수 있다.
예를 들어, 도 11을 참조하면, 프로세서(130)는 제1 액자가 위치한 영역(1110)에 포함된 컬러가 서로 유사하다고 판단될 경우, 제1 액자가 위치한 영역(1110)의 컬러를 군집화 할 수 있다. 마찬가지로, 프로세서(130)는 제2 액자가 위치한 영역(1120), 제3 액자가 위치한 영역(1130), 테이블이 위치한 영역(1140) 및 그 외 배경 영역(1150)에 포함된 컬러 각각이 유사하다고 판단될 경우, 각 영역별로 컬러를 군집화 할 수 있다.
구체적으로, 프로세서(130)는 K-평균 알고리즘(K-means algorithm)을 통해 디스플레이 장치(200)의 주변 영역의 컬러를, 각 컬러간의 유사도에 기초하여 군집화 할 수 있다.
여기에서, K-평균 알고리즘(K-means algorithm)은 입력된 데이터를 k개의 클러스터로 묶는 알고리즘으로, 프로세서(130)는 K-평균 알고리즘을 통해, 디스플레이 장치(200)의 주변 영역의 컬러 간 분산을 최소화하는 방식으로(즉, 디스플레이 장치(200)의 주변 영역의 컬러간 비유사도를 최소화하는 방식으로) 디스플레이 장치(200)의 주변 영역의 컬러를 군집화 할 수 있다.
한편, 각 컬러간의 유사도는 RGB 평균의 유사도에 의해 결정될 수 있다. 구체적으로, 프로세서(130)는 디스플레이 장치(200)의 주변 영역의 RGB 평균을 판단하고, RGB 평균이 기설정된 범위 이내인 영역의 컬러를 군집화 할 수 있다. 다만, 이는 일 실시 예일 뿐, 각 컬러간의 유사도는 다양한 방법에 의해 결정될 수 있다. 가령, 각 컬러간의 유사도는 디스플레이 장치(200)의 주변 영역의 R, G, B 각각의 값 중 특정 값이 기설정된 범위 이내인지에 따라 결정될 수 있고, 디스플레이 장치(200)의 주변 영역의 휘도 값이 기설정된 범위 이내인지에 따라 결정될 수도 있다.
한편, 프로세서(130)는 기설정된 임계 값을 고려하여, 디스플레이 장치(200)의 주변 영역의 컬러를 군집화 할 수 있다. 여기에서, 기설정된 임계 값은 제품 출시 단계에서 설정될 수 있음은 물론, 이후 사용자 명령에 따라 변경될 수 있다. 기설정된 임계 값은 30%, 50% 등 다양하게 설정될 수 있다.
구체적으로, 프로세서(130)는 촬영된 이미지에서 기설정된 임계 값 이상 차지하는 컬러를 군집화하고, 촬영된 이미지에서 기설정된 기설정된 임계 값 미만을 차지하는 컬러는 군집화 하지 않을 수 있다.
예를 들어, 기설정된 임계 값이 30%인 경우, 프로세서(130)는 촬영된 이미지에서 30% 이상을 차지하는 컬러를 군집화 하고, 30% 미만을 차지하는 컬러는 군집화 하지 않을 수 있다.
이는, 기설정된 임계 값 이상을 차지하는 컬러가 디스플레이 장치(200) 주변의 주된 컬러로써, 주된 컬러에 기초하여 생성된 시각화 이미지가 디스플레이 장치(200)에 표시될 때, 디스플레이 장치(200)가 주변 영역에 조화된다고 볼 수 있기 때문이다.
한편, 상술한 K-평균 알고리즘을 통해 디스플레이 장치(200)의 주변 영역의 컬러를 군집화하는 일 실시 예일 뿐, 본 개시는 입력 데이터를 N개의 그룹으로 집단화(clustering)하는 다양한 기술을 통해 컬러를 군집화할 수 있다.
일 예로, 프로세서(130)는 픽셀 단위로 촬영된 이미지에 포함된 컬러를 분석하고, 촬영된 이미지에 포함된 복수의 픽셀 중 컬러 간의 유사도가 기설정된 임계 값 이상인 픽셀을 군집화 할 수 있다.
예를 들어, 프로세서(130)는 촬영된 이미지에 포함된 복수의 픽셀 중 RGB 평균 값이 5%이내인 픽셀을 유사도가 기설정된 임계 값 이상인 픽셀로 판단하고, RGB 평균 값이 5%이내인 픽셀들을 군집화 할 수 있다.
도 12는 본 개시의 일 실시 예에 따른 군집화 된 컬러를 획득된 패턴에 적용하여 생성된 이미지를 설명하기 위한 도면이다.
프로세서(130)는 군집화 된 컬러를 획득된 패턴에 적용할 수 있다.
예를 들어, 전술한 도 8과 같은 패턴이 촬영된 이미지에 대응되는 패턴으로 획득된 경우, 프로세서(130)는 도 12와 같이 획득된 패턴에 군집화된 컬러를 적용할 수 있다.
이때, 프로세서(130)는 군집화 된 컬러 각각이 촬영된 이미지에서 차지하는 비율에 따라, 군집화 된 컬러를 획득된 패턴에 상이한 비율로 적용할 수 있다.
구체적으로, 프로세서(130)는 군집화 된 컬러 각각이 촬영된 이미지에서 차지하는 비율을 판단하고, 비율이 높은 군집화 된 컬러를 비율이 낮은 군집화 된 컬러보다 획득된 패턴에 상대적으로 많이 적용할 수 있다.
예를 들어, 도 11과 같이, 군집화 된 컬러 각각이 촬영된 이미지에서 차지하는 비율이 배경 영역(1150), 제1 액자가 위치한 영역(1110), 제3 액자가 위치한 영역(1130), 테이블이 위치한 영역(1140) 및 제2 액자가 위치한 영역(1120) 순서로 작아지는 경우, 프로세서(130)는 도 12와 같이, 배경 영역(1150)에 대응하여 군집화 된 컬러를 획득된 패턴에 가장 많이 적용하고, 제1 액자가 위치한 영역(1110)에 대응하여 군집화 된 컬러를 획득된 패턴에 다음으로 많이 적용하고, 제3 액자가 위치한 영역(1130)에 대응하여 군집화 된 컬러를 획득된 패턴에 다음으로 많이 적용하며, 테이블이 위치한 영역(1140)에 대응하여 군집화 된 컬러를 획득된 패턴에 다음으로 많이 적용하고, 제2 액자가 위치한 영역(1120)에 대응하여 군집화 된 컬러를 획득된 패턴에 상대적으로 가장 적게 적용할 수 있다.
이후, 프로세서(130)는 군집화 된 컬러를 획득된 패턴에 적용하여 생성한 이미지, 즉 시각화 이미지가 디스플레이 장치(200)에 출력되도록 통신부(110)를 제어할 수 있다.
구체적으로, 프로세서(130)는 시각화 이미지를 통신부(110)를 통해 디스플레이 장치(200)로 전송하여, 시각화 이미지가 디스플레이 장치(200)에 출력되도록 할 수 있다.
또는, 전술한 바와 같이, 프로세서(130)는 셋톱박스 등의 외부 장치(미도시)와 통신하여, 외부 장치(미도시)로 시각화 이미지를 전송하고, 디스플레이 장치(200)는 외부 장치(미도시)로부터 시각화 이미지를 수신하여 출력 할 수도 있다.
이에 따라, 디스플레이 장치(200)에는 도 13과 같이 시각화 이미지가 표시될 수 있다. 이와 같은 시각화 이미지가 디스플레이 장치(200)에 표시될 때, 디스플레이 장치는 주변 오브젝트와 조화되어 인테리어적 요소로 기능할 수 있고, 사용자는 디스플레이 장치가 위치하는 영역과 디스플레이 장치의 주변 영역에 대해 시각적으로 이질감을 느끼지 않게 된다. 즉, 사용자는 마치 디스플레이 장치가 없는 듯한 경험을 할 수 있게 된다.
도 13은 본 개시의 일 실시 예에 따른 방향성에 기초하여 획득된 패턴을 설명하기 위한 도면이다.
프로세서(130)는 디스플레이 장치(200)를 기준으로, 디스플레이 장치(200)의 주변 영역에 포함된 패턴의 위치를 판단할 수 있다.
여기에서, 패턴의 위치는 가상의 선분에 기초하여 판단될 수 있다.
일 예로, 도 14를 참조하면, 프로세서(130)는 디스플레이 장치(200)를 관통하는 가상의 가로 선분 및 세로 선분(1410, 1420)에 기초하여, 디스플레이 장치(200)의 주변 영역에 포함된 패턴의 위치를 판단할 수 있다.
본 실시 예에서, 프로세서(130)는 디스플레이 장치(200)를 기준으로 좌측 위쪽 영역에 직사각형 패턴이 위치하고, 우측 위쪽 영역에 직사각형 패턴이 위치하며, 우측 영역에 직사각형 패턴이 위치하고, 중앙 아래 영역에 사다리꼴 패턴 및 가로 줄무늬 패턴이 위치하는 것으로 판단할 수 있다.
다만 이는 일 실시 예일 뿐, 프로세서(130)는 다양한 방법을 통해 패턴의 위치를 판단할 수 있다.
일 예로, 프로세서(130)는 촬영된 이미지에 포함된 각 픽셀의 좌표에 기초하여 디스플레이 장치(200)를 기준으로, 디스플레이 장치(200)의 주변 영역에 포함된 패턴의 위치를 판단할 수도 있다.
이후, 프로세서(130)는 촬영된 이미지에 포함된 패턴의 위치를 더 고려하여, 촬영된 이미지에 대응되는 패턴을 획득할 수 있다.
즉, 프로세서(130)는 디스플레이 장치(200)를 기준으로, 서로 다른 방향에 위치하는 각 영역의 패턴을 분석하고, 각 영역의 패턴 중 촬영된 이미지에 기설정된 비율 이상 포함된 패턴 및 기설정된 비율 이상 포함된 패턴의 위치에 기초하여, 촬영된 이미지에 대응되는 패턴을 획득할 수 있다.
예를 들어, 도 14에서, 디스플레이 장치(200)를 기준으로 좌측 위쪽 영역, 우측 위쪽 영역, 우측 영역의 직사각형 패턴 및 중앙 아래 영역의 사다리꼴 패턴이 기설정된 비율 이상의 패턴인 경우, 프로세서(130)는 도 15와 같이, 기저장된 사각형 패턴 중에서 좌측 위쪽 영역, 우측 위쪽 영역, 우측 영역 및 중앙 아래 영역의 사각형 크기가 다른 영역의 사각형 크기보다 상대적으로 큰 패턴을 촬영된 이미지에 대응되는 패턴을 획득할 수 있다.
이에 따라, 디스플레이 장치(200)의 주변 영역과 보다 조화되는 패턴을 획득할 수 있다.
도 16은 본 개시의 일 실시 예에 촬영된 이미지에 포함된 군집의 위치를 판단하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 디스플레이 장치(200)를 기준으로, 군집화된 컬러가 위치하는 영역을 판단할 수 있다.
여기에서, 패턴의 위치는 가상의 선분에 기초하여 판단될 수 있다.
일 예로, 도 16을 참조하면, 프로세서(130)는 디스플레이 장치(200)를 관통하는 가상의 가로 선분 및 세로 선분(1610, 1620)에 기초하여, 디스플레이 장치(200)를 기준으로, 군집화된 컬러가 위치하는 영역을 판단할 수 있다.
본 실시 예에서, 프로세서(130)는 디스플레이 장치(200)를 기준으로 좌측 위쪽 영역에 제1 군집이 위치하고, 우측 위쪽 영역에 제2 군집이 위치하며, 우측 영역에 제3 군집이 위치하고, 중앙 아래 영역에 제4 군집이 위치하고, 그 외 영역에 제5 군집이 위치하는 것으로 판단할 수 있다.
다만 이는 일 실시 예일 뿐, 프로세서(130)는 다양한 방법을 통해 군집화된 컬러가 위치하는 영역을 판단할 수 있다.
일 예로, 프로세서(130)는 촬영된 이미지에 포함된 각 픽셀의 좌표에 기초하여 디스플레이 장치(200)를 기준으로, 디스플레이 장치(200)의 주변 영역에 군집화된 컬러가 위치하는 영역을 판단할 수 있다.
이후, 프로세서(130)는 촬영된 이미지에 포함된 각 군집의 위치를 더 고려하여, 획득된 패턴에 군집화된 컬러를 적용할 수 있다.
즉, 프로세서(130)는 디스플레이 장치(200)를 기준으로, 서로 다른 방향에 위치하는 각 영역의 컬러를 분석하고, 각 영역의 컬러 간의 유사도에 기초하여, 촬영된 이미지에 포함된 컬러를 군집화하고, 디스플레이 장치(200)를 기준으로 군집화된 컬러가 위치하는 영역에 기초하여, 군집화 된 컬러를 획득된 패턴에 적용할 수 있다.
예를 들어, 도 16과 같이, 디스플레이 장치(200)를 기준으로 좌측 위쪽 영역에 제1 군집이 위치하고, 우측 위쪽 영역에 제2 군집이 위치하며, 우측 영역에 제3 군집이 위치하고, 중앙 아래 영역에 제4 군집이 위치하고, 그 외 영역에 제5 군집이 위치하는 것으로 판단된 상태에서, 도 15와 같은 패턴이 획득된 경우, 프로세서(130)는 도 17과 같이, 좌측 위쪽 영역에는 제1 군집에 대응되는 컬러를 적용하고, 우측 위쪽 영역에는 제2 군집에 대응되는 컬러를 적용하며, 우측 영역에는 제3 군집에 대응되는 컬러를 적용하고, 중앙 아래 영역에는 제4 군집에 대응되는 컬러를 적용하고, 그 외 영역은 제5 군집에 대응되는 컬러를 적용할 수 있다.
이에 따라, 본 개시의 일 실시 예에 따른 전자 장치(100)는 디스플레이 장치(200)의 주변과 조화되는 시각화된 이미지를 생성할 수 있다.
도 18 및 도 19는 본 개시의 일 실시 예에 따른 촬영된 이미지에 대응되는 패턴을 획득하는 실시 예를 설명하기 위한 도면이다.
전술한 바와 같이, 프로세서(130)는 기저장된 복수의 패턴 중 촬영된 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
예를 들어, 프로세서(130)는 도 8과 같은 사각형 패턴을 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
한편, 프로세서(130)는 촬영된 이미지에 기저장된 복수의 패턴과 상이한 패턴이 포함된 경우, 상이한 패턴의 컬러를 추가로 군집화 할 수 있다. 여기에서, 상이한 패턴은 촬영된 이미지에 기설정된 비율 미만으로 포함된 패턴이 될 수 있다. 이는, 기저장된 복수의 패턴과 상이한 패턴이면, 상이한 패턴이 디스플레이 장치(200)의 주변 영역의 키 포인트가 되는 패턴으로 볼 수 있음을 반영한 것이다.
예를 들어, 도 18에 도시된 바와 같이, 카메라(120)를 통해 촬영된 이미지에 기저장된 복수의 패턴과 상이한 패턴인 꽃 모양 오브젝트(1810)가 포함된 경우, 프로세서(130)는 꽃 모양 오브젝트(1810)의 컬러를 추가로 군집화 할 수 있다.
그리고, 프로세서(130)는 전술한 적어도 하나의 군집화 된 컬러 및 추가로 군집화 된 컬러를 획득된 패턴에 적용할 수 있다.
예를 들어, 꽃 모양 오브젝트(1810)의 컬러가 노랑인 경우, 프로세서(130)는 도 19에 도시된 바와 같이, 획득된 패턴의 적어도 하나의 영역(1910, 1920, 1930)에 노랑 컬러를 추가적으로 적용할 수 있다.
도 20 및 도 21은 본 개시의 일 실시 예에 따른 패턴에 군집화 된 컬러를 적용하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 획득된 패턴이 필요로 하는 컬러의 개수에 따라, 군집화 된 컬러를 패턴에 상이하게 적용할 수 있다.
구체적으로, 프로세서(130)는 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우, 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 기설정된 비율 이상 차지하는 컬러를 획득된 패턴에 적용할 수 있다.
여기에서, 기설정된 개수는 제품 출시 단계에서 설정될 수 있음은 물론, 이후 사용자 명령에 따라 변경될 수 있다. 기설정된 개수는 10개, 20개 등 다양하게 설정될 수 있다.
또한, 획득된 패턴이 필요로 하는 컬러의 개수는 패턴에 포함된 폐 영역의 개수에 따라 결정될 수 있다. 여기에서, 폐 영역은 사각형 등의 다각형이 될 수 있음은 물론, 직선, 곡선 등이 될 수 있다.
예를 들어, 기설정된 개수가 10개이고, 획득된 패턴이 도 20에 도시된 바와 같이, 8개의 사각형을 포함하는 패턴인 경우, 프로세서(130)는 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우이므로, 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 획득된 패턴에 적용할 수 있다.
한편, 기설정된 비율은 제품 출시 단계에서 설정될 수 있음은 물론, 이후 사용자 명령에 따라 변경될 수 있다. 기설정된 비율은 50%, 80% 등 다양하게 설정될 수 있다.
예를 들어, 기설정된 비율이 50%이고, 특정 군집에 포함된 복수의 컬러의 RGB 평균이 50 내지 60이고, 이 중 RGB 평균이 55에 해당하는 컬러가 해당 군집에서 50%이상 포함된 경우, 프로세서(130)는 RGB 평균이 55인 컬러를 획득된 패턴에 적용할 수 있다.
마찬가지로, 프로세서(130)는 다른 군집에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 기설정된 비율 이상 차지하는 컬러를 획득된 패턴에 적용할 수 있다.
한편, 프로세서(130)는 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우, 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 획득된 패턴에 적용할 수 있다.
예를 들어, 기설정된 개수가 10개이고, 획득된 패턴이 도 21에 도시된 바와 같이, 수개의 세로 줄무늬를 포함하는 패턴인 경우, 프로세서(130)는 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우이므로, 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 획득된 패턴에 적용할 수 있다.
예를 들어, 특정 군집에 포함된 복수의 컬러의 RGB 평균이 50 내지 60인 경우, RGB 평균이 50 내지 60 사이에 있는 컬러를 랜덤하게 획득된 패턴에 적용할 수 있다.
도 22 및 도 23은 본 개시의 일 실시 예에 따른 촬영된 위치에 따라 상이한 패턴을 획득하는 실시 예를 설명하기 위한 도면이다.
프로세서(130)는 촬영된 위치에 따라 상이한 패턴을 획득할 수 있다.
도 22는 본 개시의 일 실시 예에 따른 디스플레이 장치(200)를 도 3과 비교하였을 때, 상대적으로 멀리서 촬영하는 경우를 도시한 도면이다. 이 때, 도 22에 도시된 바와 같이, 카메라(120)를 통해 촬영된 이미지에 포함된 액자, 테이블 등의 크기는 도 3과 비교하였을 때, 상대적으로 작을 수 있다.
이 경우, 프로세서(130)는 도 3과 같은 이미지에서 획득한 패턴과는 상이한 패턴을, 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
구체적으로, 프로세서(130)는 촬영된 이미지에 포함된 패턴의 크기를 고려하여, 촬영된 이미지에 대응되는 이미지를 획득할 수 있다.
즉, 프로세서(130)는 기저장된 복수의 사각형 패턴 중에서, 상대적으로 작은 크기의 사각형으로 구성된 패턴을 촬영된 이미지에 대응되는 이미지를 획득할 수 있다.
예를 들어, 도 23에 도시된 바와 같이, 프로세서(130)는 도 3과 같은 이미지에서 획득한 패턴보다 상대적으로 작은 크기의 사각형으로 구성된 패턴을 촬영된 이미지에 대응되는 패턴으로 획득할 수 있다.
이에 따라, 사용자 니즈에 부합하는 패턴이 획득될 수 있다.
도 24a 및 도 24b는 본 개시의 일 실시 예에 따른 컬러를 군집화 하는 실시 예를 설명하기 위한 도면이다.
카메라(120)에 의해 촬영된 이미지에는 디스플레이 장치(200)에 의해 가려진 영역이 포함될 수 있다.
이 경우, 컬러가 군집화된 영역(2310)에는 도 24a에 도시된 바와 같이, 디스플레이 장치(200)에 의해 가려진 영역이 포함되지 않는다.
이 경우, 프로세서(130)는 군집화된 영역(2310)의 장축을 고려하여, 디스플레이 장치(200)에 의해 가려진 영역까지 군집화 할 수 있다.
구체적으로, 도 24b에 도시된 바와 같이, 프로세서(130)는 군집화된 영역(2310)의 중심점을 지나는 장축을 판단하고, 장축에 기초하여 디스플레이 장치(200)에 의해 가려진 영역까지 군집화 할 수 있다.
이에 따라, 본 개시에 따른 전자 장치(100)는 촬영된 이미지에 포함되지 않는, 디스플레이 장치(200) 후방 영역까지 고려하여, 촬영된 이미지의 컬러를 군집화함으로써, 실제 디스플레이 장치(200) 주변의 컬러의 비율에 대응되도록 컬러를 군집화 할 수 있다.
도 25는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 상세 블록도이다.
도 25를 참조하면, 본 개시의 일 실시 예에 따른 전자 장치(100)는 통신부(110), 카메라(120), 메모리(140), 디스플레이(150), 감지부(160), 스피커(170), 센서(180) 및 마이크(190)를 포함할 수 있다. 이하, 상술한 부분과 중복되는 부분은 설명은 축약하거나 생략하여 설명한다.
메모리(140)는 전자 장치(100)를 구동하기 위한 다양한 모듈을 저장한다. 예를 들어, 메모리(140)에는 베이스 모듈, 센싱 모듈, 통신 모듈, 프리젠테이션 모듈, 웹 브라우저 모듈, 서비스 모듈을 포함하는 소프트웨어가 저장될 수 있다. 이때, 베이스 모듈은 전자 장치(100)에 포함된 각 하드웨어들로부터 전달되는 신호를 처리하여 상위 레이어 모듈로 전달하는 기초 모듈이다. 센싱 모듈은 각종 센서들로부터 정보를 수집하고, 수집된 정보를 분석 및 관리하는 모듈로서, 얼굴 인식 모듈, 음성 인식 모듈, 모션 인식 모듈, NFC 인식 모듈, 오브젝트 인식 모듈 등을 포함할 수 있다. 프리젠테이션 모듈은 디스플레이 화면을 구성하기 위한 모듈로서, UI 및 그래픽 처리를 수행하는 UI 렌더링 모듈을 포함할 수 있다. 통신 모듈은 외부 장치와 통신을 수행하기 위한 모듈이다. 웹 브라우저 모듈은 웹 브라우징을 수행하여 웹 서버에 액세스하는 모듈을 의미한다. 서비스 모듈은 다양한 서비스를 제공하기 위한 각종 애플리케이션을 포함하는 모듈이다.
디스플레이(150)는 다양한 이미지를 표시할 수 있다. 특히, 디스플레이(150)는 카메라(120)에 의해 촬영된 이미지를 표시할 수 있다. 또한, 디스플레이(150)는 촬영된 이미지에서 디스플레이 장치(200)를 식별하기 위한 가이드 UI를 표시할 수 있다.
이러한 디스플레이(150)는 LCD(Liquid Crystal Display), PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(150) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(150)는 터치 감지부와 결합되어 터치 스크린으로 구현될 수 있다.
감지부(160)는 사용자 명령을 감지하기 위한 다양한 감지 센서로 구현될 수 있다. 예를 들어, 감지부(160)는 터치 감지부를 포함할 수 있다.
스피커(170)는 오디오 처리부(미도시)에 의해 디코딩이나 증폭, 노이즈 필터링과 같은 다양한 처리 작업이 수행된 각종 오디오 데이터를 출력하는 구성이다. 또한, 스피커(170)는 각종 알림 음이나 음성 메시지를 출력할 수 있다. 본 개시의 일 실시 예에 따르면, 스피커(170)는 카메라(120)에 의해 영상이 촬영될 때 오디오를 출력할 수 있다.
센서(180)는 전자 장치(100)의 움직임을 감지할 수 있다. 구체적으로, 센서(180)는 가속도 센서, 자이로 센서 또는 지자기 센서로 구현되어, 전자 장치(100)의 움직임을 감지할 수 있다.
센서(180)는 전자 장치(100) 주변의 조도를 감지할 수 있다. 구체적으로, 센서(180)는 조도 센서로 구현되어, 전자 장치(100) 주변의 조도, 전자 장치(100)에 입사되는 외광의 방향, 밝기 등을 감지할 수 있다.
마이크(190)는 사용자 음성을 수신할 수 있다. 여기에서, 사용자 음성은 카메라 제어를 사용자 음성 또는 시각화 이미지를 디스플레이 장치(200)에 출력하기 위한 사용자 음성 등의 다양한 음성이 될 수 있다.
프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어한다.
프로세서(130)는 센서(180)에 의해 감지된 주변 조도에 기초하여, 시각화 이미지를 보정할 수 있다.
구체적으로, 프로세서(130)는 조도 센서에 의해 감지된 외광의 색 온도 및 밝기 정보 중 적어도 하나에 기초하여, 시각화 이미지의 색 온도 및 밝기 중 적어도 하나를 보정할 수 있다.
예를 들어, 프로세서(130)는 조도 센서로부터 획득한 밝기 정보에 기초하여, 외광의 광도가 어둡다고 판단될 경우, 시각화 이미지의 전체 밝기를 어둡게 조절할 수 있다. 이에 따라, 디스플레이 장치(200)에 표시되는 시각화 이미지는 실제 디스플레이 장치(200) 주변의 배경 영역과 조화될 수 있다.
프로세서(130)는 마이크(190)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 시각화 이미지가 디스플레이 장치(200)에 출력될 수 있도록 통신부(110)를 제어할 수 있다. 구체적으로, 마이크(190)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 프로세서(130)는 STT(Speech to Text) 알고리즘을 통해 사용자 음성을 텍스트로 변환할 수 있다. 그리고, 프로세서(130)는 변환된 텍스트를 분석하여 촬영을 수행하도록 카메라(120)를 제어하고, 카메라를 통해 촬영된 이미지에서 시각화 이미지를 생성한 뒤, 시각화 이미지가 디스플레이 장치(200)에 출력될 수 있도록 통신부(110)를 제어할 수 있다.
한편, 프로세서(130)는 군집화 된 컬러 각각이 촬영된 이미지에서 차지하는 비율을 판단하고, 기설정된 비율 이상 차지하는 군집화된 컬러가 있을 경우, 군집화 된 컬러 각각의 비율을 조정하고, 비율이 조정된 군집화 된 컬러 각각을 획득된 패턴에 적용할 수 있다.
예를 들어, 제1 군집이 촬영된 이미지에서 차지하는 비율이 75%이고, 제2 군집이 촬영된 이미지에서 차지하는 비율이 15%이며, 제3 군집이 촬영된 이미지에서 차지하는 비율이 10%이고, 기설정된 비율이 50%인 경우, 프로세서(130)는 기설정된 비율 이상 차지하는 군집인 제1 군집의 비율을 50%로 조정할 수 있다.
그리고, 프로세서(130)는 나머지 50% 비율에서, 제2 및 제3 군집 각각의 비율을 조정할 수 있다. 본 실시 예에서, 제2 및 제3 군집은 조정 전 3:2 비율을 가지고 있는 바, 조정 후에도 3:2 비율을 유지하기 위해, 제2 군집은 30%로, 제3 군집은 20%로 조정될 수 있다.
이에 따라, 최종적으로 프로세서(130)는 50% 비율의 제1 군집, 30% 비율의 제2 군집 및 20% 비율의 제3 군집을 이용하여, 시각화 이미지를 생성할 수 있다. 즉, 프로세서(130)는 획득된 패턴에 제1 군집에 대응되는 컬러를 50% 적용하고, 제2 군집에 대응되는 컬러를 30% 적용하며, 제3 군집에 대응되는 컬러를 20%로 적용하여, 시각화 이미지를 생성할 수 있다.
이와 같이, 특정 군집의 색이 지나치게 많이 포함되지 않도록 군집의 비율을 조정함으로써, 본 개시는 디스플레이 장치(200)의 주변 영역과 조화되는 이미지를 생성할 수 있다.
한편, 프로세서(130)는 획득된 패턴에 군집화 된 컬러를 적용함에 있어서, 패턴에 포함된 컬러 별 경계면에 이미지 처리를 할 수 있다. 구체적으로, 프로세서(130)는 컬러 별 경계면에 블렌딩 처리를 수행할 수 있다. 이에 따라, 자연스러운 시각화 이미지가 생성될 수 있다.
도 26은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 상세 블록도이다.
도 26을 참조하면, 본 개시의 일 실시 예에 따른 디스플레이 장치(200)는 방송 수신부(230), 신호 분리부(235), A/V 처리부(240), 오디오 출력부(245), 저장부(250), 통신부(255), 조작부(260), 프로세서(270), 영상 신호 생성부(275), 패널부(280) 및 LED 드라이버 (290)를 포함할 수 있다.
방송 수신부(230)는 방송국 또는 위성으로부터 유선 또는 무선으로 방송을 수신할 수 있다. 여기에서, 방송 수신부(230)는 튜너로 구현될 수 있다.
신호 분리부(235)는 방송 수신부(230)로부터 수신된 방송 신호를 영상 신호, 오디오 신호, 부가정보 신호로 분리한다. 그리고 신호 분리부(235)는 영상 신호 및 오디오 신호를 A/V 처리부(240)로 전송한다.
A/V 처리부(240)는 방송 수신부(230) 및 저장부(250)로부터 입력된 영상 신호 및 오디오 신호에 대해 비디오 디코딩, 비디오 스케일링, 오디오 디코딩 등의 신호처리를 수행한다. 그리고 A/V 처리부(240)는 영상 신호를 영상 신호 생성부(220)로 전송하고, 오디오 신호를 오디오 출력부(145)로 전송한다.
오디오 출력부(245)는 A/V 처리부(240)로부터 수신된 오디오 신호를 사운드로 변환하여 스피커(미도시)를 통해 출력할 수 있다.
영상 신호 생성부(275)는 GUI(Graphic User Interface)를 생성한다. 그리고 영상 신호 생성부(275)는 생성된 GUI를 A/V 처리부(240)로부터 수신된 영상에 부가한다. 그리고 영상 신호 생성부(275)는 GUI가 부가된 영상에 대응되는 영상 신호를 패널부(280)로 전송한다. 이에 따라, 패널부(280)는 디스플레이 장치(200)에서 제공하는 각종 정보 및 영상 신호 생성부(275)에서 전달된 영상을 표시할 수 있다.
그리고 영상 신호 생성부(275)는 영상 신호에 대응되는 밝기 정보를 추출하고, 추출된 밝기 정보에 대응되는 디밍 신호를 생성할 수 있다. 그리고 영상 신호 생성부(275)는 생성된 디밍 신호를 패널부(280)에 제공할 수 있다. 이러한 디밍 신호는 PWM 신호일 수 있다. 한편, 본 실시 예에서는 영상 신호 생성부(275)에서 디밍 신호를 생성하여 패널부(280)에 제공하는 것으로 설명하였지만, 패널부(280)가 디밍 신호를 자체적으로 생성할 수도 있다.
패널부(280)는 영상을 표시한다. 이러한 패널부(280)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 패널부(280) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 패널부(280)는 터치 감지부와 결합하여 터치 스크린으로 구현될 수 있다.
저장부(250)는 영상 컨텐츠를 저장할 수 있다. 구체적으로, 저장부(250)는 A/V 처리부(240)로부터 영상과 오디오가 압축된 영상 컨텐츠를 수신하고, 이를 저장할 수 있다. 한편, 저장부(250)는 하드디스크, 비휘발성 메모리, 휘발성 메모리 등으로 구현될 수 있다.
조작부(260)는 터치 스크린, 터치패드, 키 버튼, 키 패드 등으로 구현될 수 있다.
통신부(255)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 통신부(255)는 와이파이 칩, 블루투스 칩을 포함할 수 있다. 프로세서(270)는 통신부(255)를 이용하여 각종 외부 기기와 통신을 수행할 수 있다. 특히, 통신부(255)는 전자 장치(100)와 통신을 수행할 수 있다.
한편, 디스플레이 장치(200)는 USB 커넥터가 연결될 수 있는 USB 포트나, 헤드셋, 마우스, LAN 등과 같은 다양한 외부 단자와 연결하기 위한 다양한 외부 입력 포트, DMB(Digital Multimedia Broadcasting) 신호를 수신하여 처리하는 DMB 칩 등을 더 포함할 수 있다.
또한, 디스플레이 장치(200)는 도 26에 도시된 구성 외에, 전원 공급부(미도시) 및 센싱부(미도시)를 더 포함할 수 있다. 전원 공급부는 디스플레이 장치(200) 내의 각 구성에 전원을 공급한다. 센싱부는 카메라, 움직임 감지부 등과 같은 다양한 센싱 장치를 포함할 수 있다.
또한, 디스플레이 장치(200)는 셋톱박스 등의 영상 공급 장치와 연결될 수 있는 인터페이스(미도시)를 더 포함할 수 있다. 여기에서, 인터페이스는 HDMI(High-Definition Multimedia Interface) 입력 단자, 컴포넌트 입력 단자, RGB 단자, DVI 단자, DP 단자, 썬더볼트 단자 또는 USB 입력 단자 등이 될 수 있다. 이에 따라, 디스플레이 장치(200)는 인터페이스(미도시)를 통해 셋톱박스 등의 영상 공급 장치로부터 방송 신호, 컨텐츠에 대한 영상 신호, 오디오 신호 등을 수신할 수 있다.
그리고, 디스플레이 장치(200)는 인터페이스를 통해 영상 공급 장치로부터 수신된 영상 신호를 처리하여 패널부(280)를 통해 영상을 표시하고, 수신된 오디오 신호를 사운드로 변환하여 스피커(미도시)를 통해 출력할 수 있다.
또한, 디스플레이 장치(200)는 사용자 음성을 수신할 수 있는 마이크(미도시)를 더 포함할 수 있다. 여기에서, 사용자 음성은 전자 장치(100)의 카메라를 제어하기 위한 음성 또는 시각화 이미지를 패널부(280)에 표시하기 위한 음성 등 다양한 음성이 될 수 있다.
프로세서(270)는 디스플레이 장치(200)의 전반적인 동작을 제어한다. 프로세서(270)는 도 16에 도시된 바와 같이, CPU, GPU, ROM, RAM을 포함할 수 있다.
프로세서(270)는 조작부(260)를 통하여 입력 받은 제어 명령에 따른 영상이 표시되도록 영상 신호 생성부(275), 패널부(280)를 제어할 수 있다.
특히, 프로세서(270)는 마이크(미도시)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 전자 장치(100)로부터 수신한 시각화 이미지를 표시하도록 패널부(280)를 제어할 수 있다. 구체적으로, 마이크(미도시)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 프로세서(270)는 STT(Speech to Text) 알고리즘을 통해 사용자 음성을 텍스트로 변환하고, 변환된 텍스트에 기초하여 전자 장치(100)로부터 수신한 시각화 이미지를 표시하도록 패널부(280)를 제어할 수 있다.
또한, 프로세서(270)는 마이크(미도시)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 시각화 이미지의 전송을 요청하는 신호를 전자 장치(100)로 전송하도록 통신부(255)를 제어 할 수도 있다.
구체적으로, 프로세서(270)는 마이크(미도시)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 사용자 음성에 대응되는 아날로그 신호를 디지털 신호로 변환한 뒤, 블루투스 또는 와이파이 등의 무선 통신을 통해 변환된 디지털 신호를 전자 장치(100)로 전송할 수 있다.
이 경우, 전자 장치(100)는 디스플레이 장치(200)로부터 수신된 신호에 기초하여, 디스플레이 장치(200)가 설치된 영역을 촬영하기 위해 카메라(120)를 제어할 수 있다. 그리고, 전자 장치(100)는 카메라(120)를 통해 디스플레이 장치(200)가 설치된 영역이 촬영되면, 전술한 바와 같이 촬영된 영상에서 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 식별하고, 주변 영역에 기초하여 시각화 이미지를 생성할 수 있다. 이후, 프로세서(270)는 전자 장치(100)로부터 시각화 이미지가 수신되면, 시각화 이미지를 표시하도록 패널부(280)를 제어할 수 있다.
또는, 프로세서(270)는 마이크(미도시)를 통해 시각화 이미지를 표시하기 위한 사용자 음성이 수신되면, 와이파이 등의 무선 통신을 통해 시각화 이미지의 전송을 요청하는 신호를 외부 서버(미도시)로 전송할 수도 있다.
이 경우, 외부 서버(미도시)는 STT(Speech to Text) 알고리즘을 통해 사용자 음성을 텍스트로 변환하고, 변환된 텍스트를 분석한 뒤, 전자 장치(100)로 시각화 이미지의 전송을 요청하는 신호를 전송하고, 이후 전자 장치(100)로부터 시각화 이미지를 수신할 수 있다. 그리고, 프로세서(270)는 외부 서버(미도시)로부터 시각화 이미지가 수신되면, 시각화 이미지를 표시하도록 패널부(280)를 제어할 수 있다.
한편, 이상에서는 전자 장치(100)에 의해 시각화 이미지가 생성되는 것으로 설명하였으나, 시각화 이미지의 생성은 디스플레이 장치(200)에 의해 수행될 수도 있다.
일 실시 예에 따라, 전자 장치(100)로부터 디스플레이 장치(200)를 포함하는 영역을 촬영한 이미지가 수신되면, 프로세서(270)는 촬영된 이미지에서 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 식별하고, 주변 영역에 기초하여 촬영된 이미지에 대응되는 패턴을 획득할 수 있다. 그리고, 주변 영역에 포함된 컬러를 각 컬러 간의 유사도에 기초하여 군집화하고, 군집화 된 컬러를 획득된 패턴에 적용하여 시각화 이미지를 생성할 수 있다. 그리고, 프로세서(270)는 생성된 시각화 이미지를 디스플레이 하도록 패널부(280)를 제어할 수 있다.
도 27은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 순서도이다.
전자 장치(100)는 디스플레이 장치(200)를 포함하는 이미지를 촬영(S2710)할 수 있다. 구체적으로, 전자 장치(100)는 카메라를 통해 디스플레이 장치(200) 및 디스플레이 장치(200)의 주변 영역을 포함하는 이미지를 촬영할 수 있다.
그리고, 전자 장치(100)는 촬영된 이미지에서 디스플레이 장치(200)를 식별(S2720)할 수 있다. 일 예로, 전자 장치(100)는 오브젝트 인식 알고리즘을 통해 디스플레이 장치(200)를 식별할 수 있다.
그리고, 전자 장치(100)는 촬영된 이미지에서 디스플레이 장치(200)에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 적어도 하나의 패턴 중 촬영된 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 촬영된 이미지에 대응되는 패턴을 획득(S2730)할 수 있다.
여기에서, 촬영된 이미지에 대응되는 패턴은 전자 장치(100)에 기저장된 복수의 패턴 중 하나가 될 수 있음은 물론, 외부 서버(미도시)로부터 획득된 패턴이 될 수도 있다.
그리고, 전자 장치(100)는 나머지 영역의 컬러를 각 컬러 간의 유사도에 기초하여 적어도 하나의 컬러로 군집화(S2740)할 수 있다. 구체적으로, 전자 장치(100)는 K-평균 알고리즘(K-means algorithm)을 통해 디스플레이 장치(200)의 주변 영역의 컬러를, 각 컬러간의 유사도에 기초하여 군집화 할 수 있다.
이후, 전자 장치(100)는 군집화 된 적어도 하나의 컬러를 획득된 패턴에 적용하여 생성한 이미지가 디스플레이 장치에 출력되도록 제어(S2750)할 수 있다.
이에 따라, 디스플레이 장치(200)는 디스플레이 장치(200)의 주변 영역과 조화되는 이미지를 출력할 수 있다. 이 경우, 디스플레이 장치(200)는 인테리어적 요소로 기능할 수 있고, 사용자는 마치 디스플레이 장치(200)가 없는 듯한 경험을 할 수 있다.
한편, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 설치 가능한 소프트웨어 또는 어플리케이션 형태로 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 대한 소프트웨어 업그레이드, 또는 하드웨어 업그레이드만으로도 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들은 전자 장치에 구비된 임베디드 서버, 또는 전자 장치 외부의 서버를 통해 수행되는 것도 가능하다.
한편, 본 발명에 따른 전자 장치의 제어 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
한편, 비일시적 판독 가능 매체란 레지스터, 캐시, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100: 전자 장치
110: 통신부
120: 카메라
130: 프로세서
200: 디스플레이 장치

Claims (20)

  1. 전자 장치에 있어서,
    통신부;
    카메라; 및
    상기 카메라를 통해 디스플레이 장치를 포함하는 이미지를 촬영하고,
    상기 이미지에서 상기 디스플레이 장치를 식별하며,
    상기 이미지에서 상기 디스플레이 장치에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 상기 적어도 하나의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 상기 이미지에 대응되는 패턴을 획득하고,
    상기 나머지 영역의 컬러를 적어도 하나의 컬러로 군집화하며,
    상기 군집화 된 적어도 하나의 컬러를 상기 획득된 패턴에 적용하여 생성한 이미지가 상기 디스플레이 장치에 출력되도록 상기 통신부를 제어하는 프로세서;를 포함하는 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 디스플레이 장치를 기준으로, 서로 다른 방향에 위치하는 각 영역의 패턴을 분석하고, 상기 각 영역의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴 및 상기 기설정된 비율 이상 포함된 패턴의 위치에 기초하여, 상기 이미지에 대응되는 패턴을 획득하고, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 디스플레이 장치를 기준으로, 상기 서로 다른 방향에 위치하는 각 영역의 컬러를 분석하고, 상기 각 영역의 컬러 간의 유사도에 기초하여, 상기 촬영된 이미지에 포함된 컬러를 군집화하고, 상기 디스플레이 장치를 기준으로 상기 군집화된 컬러가 위치하는 영역에 기초하여, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    기저장된 복수의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 상기 이미지에 대응되는 패턴으로 획득하는, 전자 장치.
  5. 제4항에 있어서,
    상기 프로세서는,
    상기 이미지에 상기 기저장된 복수의 패턴과 상이한 패턴이 포함된 경우, 상기 상이한 패턴의 컬러를 추가로 군집화하며, 상기 군집화 된 적어도 하나의 컬러 및 상기 추가로 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치.
  6. 제1항에 있어서,
    상기 프로세서는,
    픽셀 단위로 상기 촬영된 이미지에 포함된 컬러를 분석하고, 상기 이미지에 포함된 복수의 픽셀 중 상기 컬러 간의 유사도가 기설정된 임계 값 이상인 픽셀을 군집화 하는, 전자 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 상기 기설정된 비율 이상 차지하는 컬러를 상기 획득된 패턴에 적용하는, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 상기 획득된 패턴에 적용하는, 전자 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 상기 비율이 높은 군집화 된 컬러를 상기 비율이 낮은 군집화 된 컬러보다 상기 획득된 패턴에 상대적으로 많이 적용하는, 전자 장치.
  10. 제1항에 있어서,
    상기 프로세서는,
    상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 기설정된 비율 이상 차지하는 군집화된 컬러가 있을 경우, 상기 군집화 된 컬러 각각의 비율을 조정하고, 상기 비율이 조정된 군집화 된 컬러 각각을 상기 획득된 패턴에 적용하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    디스플레이 장치를 포함하는 이미지를 촬영하는 단계;
    상기 이미지에서 상기 디스플레이 장치를 식별하는 단계;
    상기 이미지에서 상기 디스플레이 장치에 대응되는 영역을 제외한 나머지 영역의 적어도 하나의 패턴을 분석하고, 상기 적어도 하나의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴에 기초하여 상기 이미지에 대응되는 패턴을 획득하는 단계;
    상기 나머지 영역의 컬러를 적어도 하나의 컬러로 군집화하는 단계; 및
    상기 군집화 된 적어도 하나의 컬러를 상기 획득된 패턴에 적용하여 생성한 이미지가 상기 디스플레이 장치에 출력되도록 제어하는 단계;를 포함하는, 전자 장치의 제어 방법.
  12. 제11항에 있어서,
    상기 적용하는 단계는,
    상기 디스플레이 장치를 기준으로, 서로 다른 방향에 위치하는 각 영역의 패턴을 분석하고, 상기 각 영역의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴 및 상기 기설정된 비율 이상 포함된 패턴의 위치에 기초하여, 상기 이미지에 대응되는 패턴을 획득하고, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
  13. 제12항에 있어서,
    상기 적용하는 단계는,
    상기 디스플레이 장치를 기준으로, 상기 서로 다른 방향에 위치하는 각 영역의 컬러를 분석하고, 상기 각 영역의 컬러 간의 유사도에 기초하여, 상기 촬영된 이미지에 포함된 컬러를 군집화하고, 상기 디스플레이 장치를 기준으로 상기 군집화된 컬러가 위치하는 영역에 기초하여, 상기 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
  14. 제11항에 있어서,
    상기 획득하는 단계는,
    기저장된 복수의 패턴 중 상기 이미지에 기설정된 비율 이상 포함된 패턴과 유사도가 상대적으로 높은 패턴을, 상기 이미지에 대응되는 패턴으로 획득하는, 전자 장치의 제어 방법.
  15. 제14항에 있어서,
    상기 획득하는 단계는,
    상기 이미지에 상기 기저장된 복수의 패턴과 상이한 패턴이 포함된 경우, 상기 상이한 패턴의 컬러를 추가로 군집화하며, 상기 군집화 된 적어도 하나의 컬러 및 상기 추가로 군집화 된 컬러를 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
  16. 제11항에 있어서,
    상기 군집화하는 단계는,
    픽셀 단위로 상기 촬영된 이미지에 포함된 컬러를 분석하고, 상기 이미지에 포함된 복수의 픽셀 중 상기 컬러 간의 유사도가 기설정된 임계 값 이상인 픽셀을 군집화 하는, 전자 장치의 제어 방법.
  17. 제1항에 있어서,
    상기 적용하는 단계는,
    상기 획득된 패턴이 기설정된 개수 미만의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러 중 기설정된 비율 이상 차지하는 컬러를 분석하고, 상기 기설정된 비율 이상 차지하는 컬러를 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
  18. 제1항에 있어서,
    상기 적용하는 단계는,
    상기 획득된 패턴이 기설정된 개수 이상의 컬러의 적용을 필요로 하는 경우, 상기 군집화 된 컬러에 포함된 복수의 컬러를 랜덤하게 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
  19. 제1항에 있어서,
    상기 적용하는 단계는,
    상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 상기 비율이 높은 군집화 된 컬러를 상기 비율이 낮은 군집화 된 컬러보다 상기 획득된 패턴에 상대적으로 많이 적용하는, 전자 장치의 제어 방법.
  20. 제1항에 있어서,
    상기 적용하는 단계는,
    상기 군집화 된 컬러 각각이 상기 이미지에서 차지하는 비율을 판단하고, 기설정된 비율 이상 차지하는 군집화된 컬러가 있을 경우, 상기 군집화 된 컬러 각각의 비율을 조정하고, 상기 비율이 조정된 군집화 된 컬러 각각을 상기 획득된 패턴에 적용하는, 전자 장치의 제어 방법.
KR1020180114719A 2018-09-27 2018-09-27 전자 장치 및 그 제어 방법 KR102604170B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020180114719A KR102604170B1 (ko) 2018-09-27 2018-09-27 전자 장치 및 그 제어 방법
EP19186912.2A EP3629229A1 (en) 2018-09-27 2019-07-18 Method, and corresponding apparatus, for controlling display of images on a display in dependence on the surroundings of the display
US16/526,174 US11113850B2 (en) 2018-09-27 2019-07-30 Electronic apparatus and control method thereof
PCT/KR2019/010356 WO2020067645A1 (en) 2018-09-27 2019-08-14 Electronic apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180114719A KR102604170B1 (ko) 2018-09-27 2018-09-27 전자 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20200035556A true KR20200035556A (ko) 2020-04-06
KR102604170B1 KR102604170B1 (ko) 2023-11-20

Family

ID=67437929

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180114719A KR102604170B1 (ko) 2018-09-27 2018-09-27 전자 장치 및 그 제어 방법

Country Status (4)

Country Link
US (1) US11113850B2 (ko)
EP (1) EP3629229A1 (ko)
KR (1) KR102604170B1 (ko)
WO (1) WO2020067645A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965846A (zh) * 2018-09-07 2018-12-07 晶晨半导体(上海)股份有限公司 调节白平衡的方法、系统及显示器

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080258590A1 (en) * 2005-12-23 2008-10-23 Koninklijke Philips Electronics N.V. Color Matching for Display System for Shops
KR20140141027A (ko) * 2013-05-31 2014-12-10 삼성에스디에스 주식회사 이미지에서 반복 패턴을 검출하는 방법 및 장치
KR20170105444A (ko) * 2016-03-09 2017-09-19 삼성전자주식회사 컨텐츠 큐레이션을 포함하는 디스플레이 장치들의 구성 및 동작
KR20180045228A (ko) * 2016-10-25 2018-05-04 삼성전자주식회사 전자 장치 및 이의 제어 방법

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4365897B2 (ja) 1997-02-21 2009-11-18 キヤノン株式会社 Ｔｖ会議システムおよびｔｖ会議システムのための方法
US20030214527A1 (en) 2002-05-17 2003-11-20 Paul Veniva Dorothia Television screen saver
KR100754877B1 (ko) 2005-02-14 2007-09-04 삼성전자주식회사 Ｔｖ 및 ｔｖ의 ｗｐｓｓ 모드 설정방법
KR20090005621A (ko) 2007-07-09 2009-01-14 삼성전자주식회사 색상 자동 변경 방법 및 그 장치
US20090262257A1 (en) 2008-04-18 2009-10-22 Sony Corporation Background tv
WO2010024000A1 (ja) * 2008-08-26 2010-03-04 シャープ株式会社 画像表示装置、及び画像表示装置の駆動方法
EP2570986A1 (en) * 2011-09-13 2013-03-20 Alcatel Lucent Method for creating a cover for an electronic device and electronic device
KR101872861B1 (ko) 2012-05-04 2018-06-29 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US9198496B2 (en) 2012-07-02 2015-12-01 Sony Corporation Makeup TV
US9286025B2 (en) 2013-03-21 2016-03-15 Polaris Financial Technology Ltd. Interactive rendering on a multi-display device
US20150286456A1 (en) 2014-01-11 2015-10-08 Userful Corporation Method and System of Video Wall Setup and Adjustment Using GUI and Display Images
JP6698544B2 (ja) 2014-03-31 2020-05-27 ミューラル インコーポレイテッド 周囲の状況に基づいた出力表示生成のためのシステム及び方法
EP3096290B1 (en) 2015-05-19 2018-07-18 Axis AB Method and system for determining camera pose
KR102620138B1 (ko) 2016-06-02 2024-01-03 삼성전자주식회사 화면 출력 방법 및 이를 지원하는 전자 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080258590A1 (en) * 2005-12-23 2008-10-23 Koninklijke Philips Electronics N.V. Color Matching for Display System for Shops
KR20140141027A (ko) * 2013-05-31 2014-12-10 삼성에스디에스 주식회사 이미지에서 반복 패턴을 검출하는 방법 및 장치
KR20170105444A (ko) * 2016-03-09 2017-09-19 삼성전자주식회사 컨텐츠 큐레이션을 포함하는 디스플레이 장치들의 구성 및 동작
KR20180045228A (ko) * 2016-10-25 2018-05-04 삼성전자주식회사 전자 장치 및 이의 제어 방법

Also Published As

Publication number Publication date
EP3629229A1 (en) 2020-04-01
KR102604170B1 (ko) 2023-11-20
US11113850B2 (en) 2021-09-07
WO2020067645A1 (en) 2020-04-02
US20200105026A1 (en) 2020-04-02

Similar Documents

Publication Publication Date Title
JP6811321B2 (ja) ディスプレイ装置及びその制御方法
US9807300B2 (en) Display apparatus for generating a background image and control method thereof
CN110463195B (zh) 用于在虚拟现实视频中渲染定时文本和图形的方法和设备
CN109191549B (zh) 显示动画的方法及装置
US10681287B2 (en) Apparatus and method for displaying AR object
KR102267397B1 (ko) 전자 장치 및 이의 제어 방법
KR102431712B1 (ko) 전자장치, 그 제어방법 및 그 컴퓨터프로그램제품
US20200068122A1 (en) Display device, system, and recording medium
US11128909B2 (en) Image processing method and device therefor
CN111656767B (zh) 电子装置及其操作方法
KR102604170B1 (ko) 전자 장치 및 그 제어 방법
KR102566738B1 (ko) 전자 장치 및 그 제어 방법
US10939083B2 (en) Electronic apparatus and control method thereof
US11076112B2 (en) Systems and methods to present closed captioning using augmented reality
KR20210049582A (ko) 전자 장치 및 그 제어 방법
US11467798B2 (en) Display apparatus for changing an advertisement area, server, electronic apparatus and control methods thereof
KR20190006329A (ko) 디스플레이장치 및 그 제어방법
KR20220032867A (ko) 전자장치 및 그 제어방법
KR20240054138A (ko) 전자 장치 및 그 동작 방법
KR20190019580A (ko) 디스플레이 장치 및 디스플레이 방법
US20170193869A1 (en) Method and electronic device for projected image processing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant