KR102262086B1 - 이미지 처리 방법 및 장치 - Google Patents

이미지 처리 방법 및 장치 Download PDF

Info

Publication number
KR102262086B1
KR102262086B1 KR1020140064491A KR20140064491A KR102262086B1 KR 102262086 B1 KR102262086 B1 KR 102262086B1 KR 1020140064491 A KR1020140064491 A KR 1020140064491A KR 20140064491 A KR20140064491 A KR 20140064491A KR 102262086 B1 KR102262086 B1 KR 102262086B1
Authority
KR
South Korea
Prior art keywords
image
electronic device
module
block area
changed
Prior art date
Application number
KR1020140064491A
Other languages
English (en)
Other versions
KR20150136864A (ko
Inventor
박성하
이기혁
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020140064491A priority Critical patent/KR102262086B1/ko
Priority to US14/722,399 priority patent/US9830120B2/en
Publication of KR20150136864A publication Critical patent/KR20150136864A/ko
Application granted granted Critical
Publication of KR102262086B1 publication Critical patent/KR102262086B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • H04N5/7475Constructional details of television projection apparatus
    • H04N5/7491Constructional details of television projection apparatus of head mounted projectors
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0464Positioning
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Abstract

본 발명의 다양한 실시예는 제1 이미지를 표시하는 표시 모듈, 및 상기 제1 이미지와 상이한 제2 이미지를 수신하고, 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경하고, 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정하고, 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어하는 제어 모듈을 포함하는 이미지 처리 방법 및 장치를 제공한다. 또한, 다른 실시예도 가능하다.

Description

이미지 처리 방법 및 장치{APPARATUS AND METHOD FOR PROCESSING IMAGE}
본 발명은 효율적으로 이미지를 처리하는 방안을 제공한다.
휴대폰과 같은 전자 장치는 기능이 점차 발전하면서, 음성통화, 문자 메시지 전송 등의 1차적인 서비스를 제공할 뿐만 아니라, 최근에는 노트북과 같이, 문서 작성, 동영상 편집, 무선 인터넷 등과 같은 더욱 다양한 서비스를 제공하고 있다. 또한, 상기 전자 장치는 사용자의 이용 편의성을 증대시키기 위하여, 몸체에 부착 가능한 웨어러블 장치(wearable device)로 점차 발전하고 있다.
웨어러블 디바이스는 손목시계, 팔찌와 같이 팔에 부착하는 장치와, 안경과 같이 머리에 쓸 수 있는 헤드 마운트형 디스플레이(Head mounted Display; HMD)를 포함할 수 있다. 헤드 마운트형 디스플레이는 휴대하면서 영상물을 대형화면으로 즐기거나, 수술이나 진단에 사용하는 의료기기에 적용할 수 있는 차세대 영상표시장치이다. 한편, 종래의 헤드 마운트형 디스플레이에 장착된 전자 장치는 표시부에 하나의 이미지를 표시하다가, 다른 이미지가 수신되면, 상기 표시부에 두 개의 서로 다른 이미지를 동시에 표시하도록 스위칭한다.
종래의 두 개의 이미지를 동시에 표시하는 방법은 PIP(Picture In Picture)로서, 이미지 위에 조그만 박스형태의 작은 이미지를 덧입히는 방식이다. 상기 덧입힘 형태의 이미지를 구현하기 위해서는 두 개의 원본 이미지와 그로부터 생성된 PIP 이미지를 저장하는 별도의 저장소가 필요하다. 또는, 두 개의 원본 이미지를 정해진 위치와 크기로 합성하는 합성 처리부가 필요하기 때문에 추가적인 저장공간 또는 합성을 위한 처리 시간이 필요하다.
다양한 실시예는 이미지 표시 중, 다른 이미지가 수신되는 경우, 상기 표시중인 이미지와 상기 수신된 다른 이미지를 번갈아 표시함으로써, 저장공간을 줄이고, 이미지 처리 시간을 단축시킬 수 있는 이미지 처리 방법 및 장치를 제공함을 목적으로 한다.
본 발명의 다양한 실시예에 따른 이미지를 표시하는 전자 장치는 제1 이미지를 표시하는 표시 모듈; 및 상기 제1 이미지와 상이한 제2 이미지를 수신하고, 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경하고, 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정하고, 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어하는 제어 모듈을 포함할 수 있다.
본 발명의 다양한 실시예에 따른 이미지 처리 방법은 표시 모듈에 제1 이미지를 표시하는 동작, 상기 제1 이미지와 상이한 제2 이미지를 수신하는 동작, 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경하는 동작, 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정하는 동작, 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 이미지 표시 중, 다른 이미지가 수신되는 경우, 상기 표시 중인 이미지와 상기 수신된 다른 이미지를 번갈아 표시할 수 있다.
다양한 실시예에 따르면, 실제로는 서로 다른 두 이미지들을 번갈아 표시하지만, 잔상 효과를 이용하여 사용자가 느끼기에 하나의 화면에 서로 다른 두 이미지들이 동시에 보여지는 것과 같은 효과를 얻을 수 있다.
다양한 실시예에 따르면, 하나의 이미지는 전체 화면으로 표시하고, 다른 이미지는 상기 전체 화면의 일부 영역에 표시함으로써, 전자 장치의 소모 전력을 줄일 수 있다.
다양한 실시예에 따르면, 서로 다른 두 이미지들을 합성 처리하지 않고 번갈아 표시함으로써, 이미지 합성을 위한 저장공간이나 처리 시간을 줄일 수 있다.
다양한 실시예에 따르면, 사용자가 하나의 화면에 전자 장치의 내부 이미지와 외부 이미지를 모두 볼 수 있도록 한다.
도 1은 다양한 실시예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 도면이다.
도 2는 다양한 실시예에 따른 전자장치를 도시한 블록도이다.
도 3은 다양한 실시예에 따른 전자 장치의 일례를 도시한 도면이다.
도 4는 다양한 실시예에 따른 이미지 처리 방법을 도시한 흐름도이다.
도 5는 다양한 실시예에 따른 제1 이미지 및 제2 이미지를 처리하는 일례를 도시한 도면이다.
도 6a 및 도 6b는 다양한 실시예에 따른 출력순서에 따라 두 이미지들을 고대로 표시하는 일례를 도시한 도면이다.
도 7은 다양한 실시예에 따른 출력순서에 따라 두 이미지들을 고대로 표시하는 다른 일례를 도시한 도면이다.
도 8a 및 도 8b는 다양한 실시예에 따른 좌/우 이미지들을 처리하는 일례를 도시한 도면이다.
도 9는 다양한 다른 실시예들에 따른 전자 장치의 블록도를 도시한다.
이하, 첨부된 도면들을 참조하여 다양한 실시예들을 상세히 설명한다. 이때, 첨부된 도면들에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. 하기의 설명에서는 본 발명의 다양한 실시 예들에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
본 개시 가운데 사용될 수 있는 "포함한다" 또는 "포함할 수 있다" 등의 표현은 개시된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 개시에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 개시에서 "또는" 등의 표현은 함께 나열된 단어들의 다양한, 그리고 모든 조합을 포함한다. 예를 들어, "A 또는 B"는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 개시 가운데 "제1", "제2", "첫째", 또는 "둘째", 등의 표현들이 본 개시의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 개시의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 개시에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 개시를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 개시에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 개시에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smartwatch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller’s machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 개시에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 개세에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 개시에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 도면이다.
도 1을 참조하면, 상기 전자 장치 101는 버스 110, 프로세서 120, 메모리 130, 입출력 인터페이스 140, 디스플레이 150, 통신 인터페이스 160 및 제어 모듈 170을 포함할 수 있다.
상기 버스 110는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서 120는, 예를 들면, 상기 버스 110를 통해 전술한 다른 구성요소들(예: 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 제어 모듈 170 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리 130는, 상기 프로세서 120 또는 다른 구성요소들(예: 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 제어 모듈 170 등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 130는, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 133 또는 어플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 131은 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에서 상기 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 상기 어플리케이션 134이 상기 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 상기 어플리케이션 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 134 중 적어도 하나의 어플리케이션에 상기 전자 장치 101의 시스템 리소스(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 133는 상기 어플리케이션 134이 상기 커널 131 또는 상기 미들웨어 132에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134은 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 134은 상기 전자 장치 101와 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101와 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134은 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션 134은 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140은 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110를 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 제어 모듈 170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 터치스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 제어 모듈 170로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120를 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다.
상기 통신 인터페이스 160은 상기 전자 장치 101와 외부 장치(예: 전자 장치 104 또는 서버 106) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 160은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치 101와 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 134, 어플리케이션 프로그래밍 인터페이스 133, 상기 미들웨어 132, 커널 131 또는 통신 인터페이스 160 중 적어도 하나에서 지원될 수 있다.
상기 제어 모듈 170은 표시 모듈(예: 디스플레이 150)에 표시되는 제1 이미지와 상이한 제2 이미지를 수신할 수 있다. 상기 제어 모듈 170은 전자 장치 101에 장착된 카메라로부터 상기 제2 이미지를 수신하거나, 또는 상기 통신 모듈을 통해 외부 장치로부터 상기 제2 이미지를 수신할 수 있다. 상기 카메라는 상기 표시 모듈과 대향하는 상기 전자 장치 101의 일면에 장착될 수 있다. 상기 제어 모듈 170은 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경할 수 있다. 상기 제어 모듈 170은 상기 전자 장치 101에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정할 수 있다. 상기 제어 모듈 170은 상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치 101가 좌 렌즈부 및 우 렌즈부를 포함하는 헤드 마운트형 장치(Head Mounted Device; HMD)인 경우, 상기 제어 모듈 170은 상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하고, 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정할 수 있다. 상기 제어 모듈은 상기 설정된 블록영역에 대응하여 상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 변경할 수 있다.
상기 제어 모듈 170은 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정할 수 있다. 예컨대, 상기 제어 모듈 170은 한번에 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다. 상기 제어 모듈 170은 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다. 상기 제어 모듈 170은 듀티(Duty) 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다. 상기 제어 모듈 170은 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
도 2는 다양한 실시예에 따른 전자장치를 도시한 블록도이다.
도 2를 참고하면, 전자 장치 200(예: 전자 장치 101)는 제어 모듈 210, 수신 모듈 220, 변경 모듈 230, 결정 모듈 240, 표시 모듈 250을 포함할 수 있다. 제어 모듈 210은 수신 모듈 220, 변경 모듈 230, 결정 모듈 240, 표시 모듈 250을 제어할 수 있다.
표시 모듈 250은 제1 이미지를 표시할 수 있다. 표시 모듈 250은 도 1의 입출력 인터페이스 140 또는 디스플레이 150에 해당될 수 있으며, 입출력 인터페이스 140 또는 디스플레이 150가 일체형으로 결합된 터치스크린일 수도 있다. 상기 제1 이미지는 정지영상 또는 동영상일 수 있다.
수신 모듈 220은 상기 제1 이미지와 상이한 제2 이미지를 수신할 수 있다. 상기 제2 이미지는 정지영상 또는 동영상일 수 있다. 수신 모듈 220은 전자 장치 200에 장착된 카메라로부터 상기 제2 이미지를 수신할 수 있다. 상기 카메라는 상기 표시 모듈과 대향하는 전자 장치 200의 일면에 장착될 수 있다. 또는, 수신 모듈 220은 도 1의 통신 인터페이스 160에 해당될 수 있다. 이 경우, 수신 모듈 220은 외부 장치로부터 상기 제2 이미지를 수신할 수 있다. 상기 외부 장치는 전자 장치 200 내부가 아닌 외부에 있는 전자 장치를 의미할 수 있다. 즉, 수신 모듈 220은 전자 장치 200의 내부(예: 카메라) 또는 전자 장치의 외부로부터 상기 제2 이미지를 수신할 수 있다.
수신 모듈 220은 무선 통신 또는 유선 통신을 통해서 네트워크에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
변경 모듈 230은 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경할 수 있다. 상기 블록영역은 전자 장치 200에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 크기 또는 위치가 설정될 수 있다. 상기 블록영역은 빈 공간이거나, 사용자의 인식률을 고려하여 블랙색상으로 구성될 수 있다. 상기 기설정된 설정값은 사용자의 눈에 해가 되지 않으면서, 최적의 상태로 상기 제2 이미지를 표시할 수 있도록 전자 장치 200에 설정된 것일 수 있다. 상기 사용자의 입력은 상기 사용자가 자신에 맞게 상기 블록영역의 크기 또는 위치를 설정하는 것을 의미한다. 상기 사용자의 눈 사이의 거리는 전자 장치 200가 헤드 마운트형 장치인 경우, 상기 헤드 마운트형 장치의 렌즈부와 상기 사용자의 눈 사이의 간격을 의미한다. 이때, 상기 렌즈부는 상기 표시 모듈 250에 해당될 수 있다. 예컨대, 전자 장치 200는 센서 모듈을 이용하여 센서 데이터를 검출하고, 검출된 센서 데이터를 기반으로 상기 렌즈부와 상기 사용자의 눈 사이의 거리를 산출할 수 있다.
상시 센서 모듈은 물리량을 계측하거나 전자 장치 200의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈은 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서(예: RGB(red, green, blue) 센서), 생체 센서, 온/습도 센서, 조도 센서 및 UV(ultra violet) 센서 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상시 센서 모듈은 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
다양한 실시예로, 변경 모듈 230은 상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기(size), 위치(position), 비율(ratio), 배율(magnification) 및 해상도(resolution) 중 적어도 하나를 변경할 수 있다. 변경 모듈 230은 상기 제1 이미지 및 상기 제2 이미지를 동시에 표시하지 않고, 번갈아 표시하기 위하여, 상기 기설정된 블록영역에 맞게 상기 제2 이미지를 변경할 수 있다. 만약, 전자 장치 200가 두 이미지들을 동일한 크기, 위치, 배율, 비율, 해상도로 번갈아 표시하는 경우, 상기 사용자의 눈의 피로를 가중시키고, 이미지 처리 시간이 많이 들 수 있다. 따라서, 변경 모듈 230은 상기 기설정된 블록영역에 맞게 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경함으로써, 상기 제1 이미지 및 상기 제2 이미지를 최적의 상태로 표시할 수 있다.
결정 모듈 240은 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정할 수 있다. 상기 출력순서는 상기 제1 이미지를 먼저 표시하고, 상기 제2 이미지를 나중에 표시하도록 하는 표시순서일 수 있다. 또는, 상기 출력순서는 상기 제1 이미지를 얼마동안 표시하고, 상기 제2 이미지를 상기 제1 이미지 다음에 얼마동안 표시하도록 표시시간일 수 있다. 일반적으로, 하나의 이미지가 표시될 때, 전자 장치에 따라 또는 사용자의 설정에 따라 1초에 표시되는 이미지의 프레임이 결정될 수 있다. 결정 모듈 240은 한번에 연속적으로 출력할 상기 제1 이미지의 프레임 개수 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다. 이때, 상기 프레임 개수에 따라 표시되는 시간이 결정될 수 있다. 즉, 결정 모듈 240은 상기 제1 이미지와 상기 변경된 제2 이미지를 하나의 프레임씩 출력하거나, 두 개의 프레임들씩 출력하는 등 한번에 연속적으로 출력할 프레임 개수를 결정할 수 있다. 예컨대, 결정 모듈 240은 상기 블록영역의 크기, 상기 블록영역의 위치, 상기 제1 이미지의 비율, 상기 제1 이미지의 배율 및 상기 제1 이미지의 해상도, 상기 제2 이미지의 비율, 상기 제2 이미지의 배율 및 상기 제2 이미지의 해상도 중 적어도 하나를 기반으로 상기 프레임 개수를 결정할 수 있다.
표시 모듈 250은 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시할 수 있다. 제어 모듈 210은 듀티(Duty) 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다. 전자 장치 200에 표시되는 이미지의 신호는 듀티에 의해 깜박임이 발생할 수 있다. 이러한 깜박임을 방지하기 위하여, 제어 모듈 210은 상기 듀티 주기를 조절할 수 있다. 다양한 실시예에 따르면, 제어 모듈 210은 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
다양한 실시예에 따르면, 전자 장치 200는 실제로는 서로 다른 두 이미지들을 번갈아 표시하지만, 잔상 효과를 이용하여 사용자가 느끼기에 하나의 화면에 서로 다른 두 이미지들이 동시에 보여지는 것과 같은 효과를 얻을 수 있다. 또한, 전자 장치 200는 하나의 이미지를 전체 화면으로 표시하고, 다른 이미지를 상기 전체 화면의 일부 영역에 표시함으로써, 소모 전력을 줄일 수 있다. 또한, 전자 장치 200는 서로 다른 두 이미지들을 합성 처리하지 않고 번갈아 표시함으로써, 이미지 합성을 위한 저장공간이나 처리 시간을 줄일 수 있다. 또한, 전자 장치 200는 사용자가 하나의 화면에 전자 장치의 내부 이미지와 외부 이미지를 모두 볼 수 있도록 한다.
다양한 실시예에 따르면, 전자 장치 200는 웨어러블 장치(wearable device)일 수 있다. 상기 웨어러블 디바이스는 손목시계, 팔찌와 같이 팔에 부착하는 장치와, 안경과 같이 머리에 쓸 수 있는 헤드 마운트형 디스플레이를 포함할 수 있다. 예컨대, 전자 장치 200가 헤드 마운트형 디스플레이인 경우, 제어 모듈 210은 헤드 마운트형 디스플레이의 디스플레이 특성을 고려하여 표시하는 이미지를 좌/우 이미지들로 구분할 수 있다.
도 3은 다양한 실시예에 따른 전자 장치의 일례를 도시한 도면이다.
도 3을 참고하면, 전자 장치가 헤드 마운트형 디스플레이인 경우, 상기 전자 장치는 디스플레이 특성을 고려하여 표시하는 이미지를 좌/우 이미지들로 구분할 수 있다. 상기 전자 장치는 사용자가 착용했을 때, 보이는 표시 모듈 310에 제1 이미지를 표시하고, 카메라 320 또는 외부 장치로부터 제2 이미지를 수신할 수 있다. 이때, 표시 모듈 310의 표시 영역은 사용자의 왼쪽 눈에 보이는 왼쪽 표시 영역, 사용자의 오른쪽 눈에 보이는 오른쪽 표시 영역을 포함할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하고, 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정할 수 있다. 상기 전자 장치는 상기 설정된 블록영역에 대응하여 상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 변경할 수 있다. 상기 전자 장치는 상기 제1 좌 이미지와 제1 우 이미지 및 상기 변경된 제2 좌 이미지와 제2 우 이미지의 출력순서를 결정하고, 상기 출력순서를 기반으로 상기 제1 좌 이미지와 제1 우 이미지 및 상기 변경된 제2 좌 이미지와 제2 우 이미지를 교대로 표시할 수 있다.
다양한 실시예에 따른 이미지를 표시하는 전자 장치는 제1 이미지를 표시하는 표시 모듈, 및 상기 제1 이미지와 상이한 제2 이미지를 수신하고, 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경하고, 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정하고, 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어하는 제어 모듈을 포함할 수 있다.
상기 전자 장치는 카메라, 및 통신 모듈을 더 포함할 수 있다. 상기 제어 모듈은 상기 카메라로부터 상기 제2 이미지를 수신하거나, 또는 상기 통신 모듈을 통해 외부 장치로부터 상기 제2 이미지를 수신할 수 있다.
상기 카메라는 상기 표시 모듈과 대향하는 상기 전자 장치의 일면에 장착될 수 있다.
상기 제어 모듈은 상기 전자 장치에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정할 수 있다.
상기 제어 모듈은 상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경할 수 있다.
상기 전자 장치가 좌 렌즈부 및 우 렌즈부를 포함하는 헤드 마운트형 장치인 경우, 상기 제어 모듈은 상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하고, 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정할 수 있다.
상기 제어 모듈은 상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 구분하고, 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는 상기 제2 우 이미지를 변경할 수 있다.
상기 제어 모듈은 한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다.
상기 제어 모듈은 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
상기 제어 모듈은 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
도 4는 다양한 실시예에 따른 이미지 처리 방법을 도시한 흐름도이다. 상기 이미지 처리 방법은 도 1, 도 2에 도시한 전자 장치에 의해 수행될 수 있다.
도 4를 참고하면, 동작 410에서, 상기 전자 장치는 표시 모듈에 제1 이미지를 표시할 수 있다. 상기 표시 모듈은 상기 전자 장치에서 사용자에게 각종 정보(예: 텍스트, 이미지, 동영상, 데이터, 컨텐츠, 어플리케이션 등)을 표시할 수 있다. 상기 표시모듈에서 표시되는 영역을 뷰포트(View Port) 또는 화면영역(View Area)이라 할 수 있다.
동작 420에서, 상기 전자 장치는 제2 이미지가 수신되는지 여부를 판단할 수 있다. 상기 전자 장치는 장착된 카메라로부터 상기 제2 이미지를 수신할 수 있다. 상기 카메라는 상기 표시 모듈과 대향하는 상기 전자 장치의 일면에 장착될 수 있다. 또는, 상기 전자 장치는 통신 모듈을 통해 외부 장치로부터 상기 제2 이미지를 수신할 수 있다. 상기 외부 장치는 상기 전자 장치의 내부가 아닌 외부에 있는 전자 장치를 의미할 수 있다. 즉, 상기 전자 장치는 내부(예: 카메라) 또는 상기 전자 장치의 외부로부터 상기 제2 이미지를 수신할 수 있다.
상기 제2 이미지가 수신되는 경우, 상기 전자 장치는 동작 430을 수행하고, 상기 제2 이미지가 수신되지 않는 경우, 상기 전자 장치는 동작을 종료할 수 있다.
동작 430에서, 상기 전자 장치는 제1 이미지의 블록영역의 크기 또는 위치를 설정할 수 있다. 상기 전자 장치는 상기 전자 장치에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정할 수 있다. 상기 기설정된 설정값은 사용자의 눈에 해가 되지 않으면서, 최적의 상태로 상기 제2 이미지를 표시할 수 있도록 전자 장치에 설정된 것일 수 있다. 상기 사용자의 입력은 상기 사용자가 자신에 맞게 상기 블록영역의 크기 또는 위치를 설정하는 것을 의미한다. 상기 사용자의 눈 사이의 거리는 전자 장치가 헤드 마운트형 장치인 경우, 상기 헤드 마운트형 장치의 렌즈부와 상기 사용자의 눈 사이의 간격을 의미한다. 이때, 상기 렌즈부는 상기 표시 모듈에 해당될 수 있다. 예컨대, 상기 전자 장치는 센서 모듈을 이용하여 센서 데이터를 검출하고, 검출된 센서 데이터를 기반으로 상기 렌즈부와 상기 사용자의 눈 사이의 거리를 산출할 수 있다.
동작 440에서, 상기 전자 장치는 상기 설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경할 수 있다. 상기 전자 장치는 상기 제1 이미지 및 상기 제2 이미지를 동시에 표시하지 않고, 번갈아 표시하기 위하여, 상기 설정된 블록영역에 맞게 상기 제2 이미지를 변경할 수 있다. 상기 전자 장치는 상기 설정된 블록영역에 맞게 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경함으로써, 상기 제1 이미지 및 상기 제2 이미지를 최적의 상태로 표시할 수 있다.
동작 450에서, 상기 전자 장치는 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정할 수 있다. 상기 출력순서는 상기 제1 이미지를 먼저 표시하고, 상기 제2 이미지를 나중에 표시하도록 하는 표시순서일 수 있다. 또는, 상기 출력순서는 상기 제1 이미지를 얼마동안 표시하고, 상기 제2 이미지를 상기 제1 이미지 다음에 얼마동안 표시하도록 표시시간일 수 있다. 일반적으로, 하나의 이미지가 표시될 때, 전자 장치에 따라 또는 사용자의 설정에 따라 1초에 표시되는 이미지의 프레임이 결정될 수 있다. 상기 전자 장치는 한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다. 이때, 상기 프레임 개수에 따라 표시되는 시간이 결정될 수 있다. 즉, 상기 전자 장치는 상기 제1 이미지와 상기 변경된 제2 이미지를 하나의 프레임씩 출력하거나, 두 개의 프레임들씩 출력하는 등 한번에 연속적으로 출력할 프레임 개수를 결정할 수 있다. 또는, 상기 전자 장치는 한번에 연속적으로 출력할 프레임 개수를 제1 이미지와 제2 이미지가 상이하게 설정할 수 있다. 예컨대, 상기 제1 이미지는 2 프레임씩 출력하고, 상기 변경된 제2 이미지는 1프레임씩 출력하도록 상기 전자 장치는 한번에 연속적으로 출력할 프레임 개수를 결정할 수 있다.
예컨대, 상기 전자 장치는 상기 블록영역의 크기, 상기 블록영역의 위치, 상기 제1 이미지의 비율, 상기 제1 이미지의 배율 및 상기 제1 이미지의 해상도, 상기 제2 이미지의 비율, 상기 제2 이미지의 배율 및 상기 제2 이미지의 해상도 중 적어도 하나를 기반으로 상기 프레임 개수를 결정할 수 있다.
동작 460에서, 상기 전자 장치는 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시할 수 있다. 상기 전자 장치는 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다. 상기 전자 장치는 화면 깜박임을 방지하기 위하여, 상기 듀티 주기를 조절할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
다양한 실시예에 따르면, 상기 전자 장치가 헤드 마운트형 디스플레이인 경우, 상기 헤드 마운트형 디스플레이의 디스플레이 특성을 고려하여 표시하는 이미지를 좌/우 이미지들로 구분할 수 있다. 상기 전자 장치는 상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하고, 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정할 수 있다. 즉, 상기 전자 장치는 상기 블록영역을 제1 좌 이미지 또는 제1 우 이미지 중 어느 하나에만 설정하거나, 상기 제1 좌 이미지 및 상기 제1 우 이미지 모두에 설정할 수 있다. 상기 전자 장치는 상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 구분하고, 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는 상기 제2 우 이미지를 변경할 수 있다. 예를 들어, 상기 전자 장치는 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는/및 상기 제2 우 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경할 수 있다.
다양한 실시예에 따른 이미지 처리 방법은 표시 모듈에 제1 이미지를 표시하는 동작, 상기 제1 이미지와 상이한 제2 이미지를 수신하는 동작, 상기 제1 이미지의 기설정된 블록영역에 대응하여 상기 제2 이미지를 변경하는 동작, 상기 제1 이미지 및 상기 변경된 제2 이미지의 출력순서를 결정하는 동작, 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하는 동작을 포함할 수 있다.
상기 수신하는 동작은 상기 전자 장치에 장착된 카메라 또는 외부 장치로부터 상기 제2 이미지를 수신하는 동작을 포함할 수 있다.
상기 수신하는 동작은 상기 표시 모듈과 대향하는 상기 전자 장치의 일면에 장착된 카메라로부터 상기 제2 이미지를 수신하는 동작을 포함할 수 있다.
상기 이미지 처리 방법은 상기 전자 장치에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정하는 동작을 더 포함할 수 있다.
상기 변경하는 동작은 상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경하는 동작을 포함할 수 있다.
상기 전자 장치가 좌 렌즈부 및 우 렌즈부를 포함하는 헤드 마운트형 장치인 경우, 상기 이미지 처리 방법은 상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하는 동작, 및 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정하는 동작을 더 포함할 수 있다.
상기 변경하는 동작은 상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 구분하는 동작, 및 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는 상기 제2 우 이미지를 변경하는 동작을 포함할 수 있다.
상기 결정하는 동작은 한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하는 동작, 및 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정하는 동작을 포함할 수 있다.
상기 교대로 표시하는 동작은 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하는 동작을 포함할 수 있다.
상기 교대로 표시하는 동작은 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하는 동작, 및 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하는 동작을 포함할 수 있다.
도 5a 내지 도 5c는 다양한 실시예에 따른 제1 이미지 및 제2 이미지를 처리하는 일례를 도시한 도면이다.
도 5a를 참고하면, 도면부호 A는 제1 이미지이고, 도면부호 B는 제2 이미지를 도시한 것이다. 전자 장치는 제1 이미지(A)에 블록영역(Block Area; BA1)을 설정하여 도면부호 A'와 같은 제1 이미지를 생성할 수 있다. 즉, 도면부호 A는 제1 이미지의 원본이며, 도면부호 A'는 새로 생성된 제1 이미지이다. 상기 전자 장치는 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역(BA1)의 크기 또는 위치를 설정할 수 있다. 상기 생성된 제1 이미지(A')는 블록영역(BA1)만큼을 빈 공간으로 처리할 수 있다. 상기 전자 장치는 상기 제1 이미지(A)와 상이한 제2 이미지(B)를 수신하고, 상기 제1 이미지(A)의 블록영역(BA1)에 대응하여 상기 제2 이미지(B)를 변경할 수 있다. 예컨대, 도면부호 B'와 같은 변경된 제2 이미지는 상기 블록영역(BA1)에 대응하여 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나가 변경된 것일 수 있다. 도면부호 B는 제2 이미지의 원본이며, 도면부호 B'는 변경된 제2 이미지이다. 도 5a에서, 변경된 제2 이미지(B')는 상기 블록영역(BA1)의 크기에 맞춰 원래 제2 이미지(B)의 크기가 작아진 것이다.
도 5b를 참고하면, 상기 전자 장치는 제1 이미지(A)에 제2 블록영역(BA2)을 설정하여 도면부호 A'와 같은 제1 이미지를 생성할 수 있다. 상기 전자 장치는 제2 블록영역(BA2)에 대응하여 제2 이미지(B)를 변경할 수 있다. 제2 이미지(B')는 상기 제2 블록영역(BA2)의 크기 및 위치에 맞춰 제2 이미지(B)의 크기 및 위치가 변경된 것이다. 즉, 도면부호 B는 제2 이미지의 원본이며, 도면부호 B'는 변경된 제2 이미지이다. 도 5a 및 도 5b를 비교하면, 도 5a의 블록영역(BA1)의 위치와 도 5b의 제2 블록영역(BA2)의 위치는 상이하다.
도 5c를 참고하면, 상기 전자 장치는 제1 이미지(A)에 제3 블록영역(BA3)을 설정하여 도면부호 A'와 같은 제1 이미지를 생성할 수 있다. 상기 전자 장치는 제3 블록영역(BA3)에 대응하여 제2 이미지(B)를 변경할 수 있다. 제2 이미지(B')는 상기 제3 블록영역(BA3)의 크기 및 위치에 맞춰 제2 이미지(B)의 크기 및 위치가 변경된 것이다. 도면부호 B는 제2 이미지의 원본이며, 도면부호 B'는 변경된 제2 이미지이다. 도 5a 및 도 5c를 비교하면, 도 5a의 블록영역(BA1)의 크기에 비해, 도 5c의 제3 블록영역(BA3)의 크기가 커진 것을 알 수 있다.
도 6a 및 도 6b는 다양한 실시예에 따른 출력순서에 따라 두 이미지들을 고대로 표시하는 일례를 도시한 도면이다.
도 6a를 참고하면, 도면부호 610에 도시한 바와 같이, 전자 장치는 제1 이미지(A)를 먼저 표시하고, 제2 이미지(B)를 다음에 표시하도록 출력순서를 결정할 수 있다. 상기 전자 장치는 한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다. 예를 들어, 610에서는 프레임 개수가 '1개'로서, 상기 출력순서가 제1 이미지(A)의 1 프레임을 출력하고, 제2 이미지(B)의 1 프레임을 출력하도록 결정된 것일 수 있다. 예컨대, 도면부호 620은, 상기 전자 장치는 제1 이미지(A)의 첫번째 원본 프레임을 표시하고, 제1 이미지(A)의 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째 프레임을 표시하는 일례를 도시한 것이다. 또는, 도면부호 630은, 상기 전자 장치는 제1 이미지(A)의 원본을 이미지 처리하여 블록영역(BA)을 포함하도록 제1 이미지(A')를 생성하고, 생성된 제1 이미지(A')의 첫번째 프레임을 표시하고, 상기 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째 프레임을 표시하는 일례를 도시한 것이다.
도 6b를 참고하면, 도면부호 640에 도시한 바와 같이, 상기 전자 장치는 제1 이미지(A)를 먼저 표시하고, 제2 이미지(B)를 다음에 표시하며, 다시 제1 이미지(A)를 표시하기 전에, 빈(Empty) 이미지(E)를 표시할 수 있다. 예컨대, 도면부호 650은, 상기 전자 장치가 제1 이미지(A)의 첫번째 원본 프레임을 표시하고, 제1 이미지(A)의 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째 프레임을 표시하며, 상기 빈 이미지(E)를 표시하는 일례를 도시한 것이다. 상기 빈 이미지 표시 후, 상기 전자 장치는 제1 이미지(A)의 두번째 원본 프레임을 표시하고, 제1 이미지(A)의 블록영역에 대응하여 변경된 제2 이미지(B')의 두번째 프레임을 표시할 수 있다. 또는, 도면부호 650은, 상기 전자 장치가 제1 이미지(A)의 원본을 이미지 처리하여 블록영역(BA)을 포함하도록 제1 이미지(A')를 생성하고, 생성된 제1 이미지(A')의 첫번째 프레임을 표시하고, 상기 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째 프레임을 표시하며, 상기 빈 이미지를 표시하는 일례를 도시한 것이다. 상기 전자 장치는 제1 이미지(A)와 제2 이미지(B')가 서로 중첩되지 않도록 빈 이미지(E)를 표시할 수 있다.
도 7은 다양한 실시예에 따른 출력순서에 따라 두 이미지들을 고대로 표시하는 다른 일례를 도시한 도면이다.
도 7을 참고하면, 도면부호 710은, 전자 장치가 제1 이미지(A)의 두 프레임을 먼저 표시하고, 제2 이미지(B)의 두 프레임을 다음에 표시하도록 출력순서를 결정한 일례를 도시한 도면이다. 상기 전자 장치는 한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 2개로 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정할 수 있다. 예를 들어, 710에서는 프레임 개수가 '2개'로서, 상기 출력순서가 제1 이미지(A)의 2개의 프레임들을 출력하고, 제2 이미지(B)의 2개의 프레임들을 출력하도록 결정된 것일 수 있다. 예컨대, 도면부호 720은, 상기 전자 장치는 제1 이미지(A)의 첫번째, 두번째 원본 프레임들을 표시하고, 제1 이미지(A)의 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째, 두번째 프레임들을 표시하는 일례를 도시한 것이다. 또는, 도면부호 730은, 상기 전자 장치는 제1 이미지(A)의 원본을 이미지 처리하여 블록영역(BA)을 포함하도록 제1 이미지(A')를 생성하고, 생성된 제1 이미지(A')의 첫번째, 두번째 프레임들을 표시하고, 상기 블록영역에 대응하여 변경된 제2 이미지(B')의 첫번째, 두번째 프레임들을 표시하는 일례를 도시한 것이다.
다양한 실시예들에 따르면, 상기 전자 장치는 듀티 주기를 조절하여 화면 깜박임을 방지할 수 있다. 상기 전자 장치는 사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어할 수 있다.
도 8a 및 도 8b는 다양한 실시예에 따른 좌/우 이미지들을 처리하는 일례를 도시한 도면이다.
도 8a를 참고하면, 전자 장치가 헤드 마운트형 디스플레이인 경우, 왼쪽 표시 영역 및 오른쪽 표시 영역에 각각 이미지를 표시하기 위해, 하나의 이미지를 도면부호 810에 도시한 좌 이미지 및 도면부호 820에 도시한 우 이미지로 구분할 수 있다. 예를 들어, 도면부호 810 및 820의 첫번째 이미지를 참고하면, 상기 전자 장치는 제1 이미지(A)를 도면부호 LA(Left A)에 도시한 제1 좌 이미지 및 도면부호 RA(Right A)에 도시한 제1 우 이미지로 구분할 수 있다. 상기 전자 장치는 상기 제1 좌 이미지(LA) 및 상기 제1 우 이미지(RA) 중 적어도 하나에 블록영역의 크기 또는 위치를 설정할 수 있다. 도 8a에서, 블록영역은 좌 이미지에 적용하는 좌 블록영역 및 우 이미지에 적용하는 우 블록영역으로 구분될 수 있다. 좌 블록영역은 도면부호 LBA로 도시하고, 우 블록영역은 도면부호 LBA로 도시한 것이다. 예를 들어, 상기 전자 장치는 상기 블록영역을 제1 좌 이미지(LA) 또는 제1 우 이미지(RA) 중 어느 하나에만 설정하거나, 상기 제1 좌 이미지(LA) 및 상기 제1 우 이미지(RA) 모두에 설정할 수 있다. 도면부호 810 및 820의 두번째 이미지를 참고하면, 상기 전자 장치는 제2 이미지(B)를 도면부호 LB(Left B)에 도시한 제2 좌 이미지(LB) 및 도면부호 RB(Right B)에 도시한 제2 우 이미지(RB)로 구분할 수 있다. 상기 전자 장치는 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지(LB) 또는 상기 제2 우 이미지(RB)를 변경할 수 있다. 도면부호 810은, 상기 전자 장치가 제1 좌 이미지(LA)를 먼저 표시하고, 제2 좌 이미지(LB)를 다음에 표시하도록 출력순서를 결정한 일례를 도시한 것이다. 또한, 도면부호 820은, 상기 전자 장치는 제1 우 이미지(RA)를 먼저 표시하고, 제2 우 이미지(RB)를 다음에 표시하도록 출력순서를 결정한 일례를 도시한 것이다. 다양한 실시예에 따르면, 상기 전자 장치는 좌 이미지(810)의 블록영역(LBA)과 우 이미지(820)의 블록영역(RBA)의 위치 또는 크기가 상이할 수 있다.
도 8b를 참고하면, 도면부호 830에 도시한 바와 같이, 상기 전자 장치는 제1 좌 이미지(LA)를 먼저 표시하고, 제2 좌 이미지(LB)를 다음에 표시하며, 다시 제1 좌 이미지(LA)를 표시하기 전에, 빈 이미지를 표시할 수 있다. 또한, 도면부호 840에 도시한 바와 같이, 상기 전자 장치는 제1 우 이미지(RA)를 먼저 표시하고, 제2 우 이미지(RB)를 다음에 표시하며, 다시 제1 우 이미지(RA)를 표시하기 전에, 빈 이미지를 표시할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치는 좌 이미지(830)의 블록영역(LBA)과 우 이미지(840)의 블록영역(RBA)의 위치 또는 크기가 상이할 수 있다.
도 9는 다양한 다른 실시예들에 따른 전자 장치의 블록도를 도시한다.
도 9를 참고하면, 상기 전자 장치 901는, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 구성할 수 있다. 상기 전자 장치 901는 하나 이상의 어플리케이션 프로세서(AP: application processor) 910, 통신 모듈 920, SIM(subscriber identification module) 카드 924, 메모리 930, 센서 모듈 940, 입력 장치 950, 디스플레이 960, 인터페이스 970, 오디오 모듈 980, 카메라 모듈 991, 전력관리 모듈 995, 배터리 996, 인디케이터 997 및 모터 998 를 포함할 수 있다.
상기 AP 910는 운영체제 또는 응용 프로그램을 구동하여 상기 AP 910에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 910는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 상기 AP 910는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 통신 모듈 920(예: 상기 통신 인터페이스 160)은 상기 전자 장치 901(예: 상기 전자 장치 101)와 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치 104 또는 서버 106) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시예에 따르면, 상기 통신 모듈 920은 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927, NFC 모듈 928 및 RF(radio frequency) 모듈 929를 포함할 수 있다.
상기 셀룰러 모듈 921은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈 921은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 924)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 상기 셀룰러 모듈 921은 상기 AP 910가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 921은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시예에 따르면, 상기 셀룰러 모듈 921은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 921은, 예를 들면, SoC로 구현될 수 있다. 도 9에서는 상기 셀룰러 모듈 921(예: 커뮤니케이션 프로세서), 상기 메모리 930 또는 상기 전력관리 모듈 995 등의 구성요소들이 상기 AP 910와 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP 910가 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 921)를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP 910 또는 상기 셀룰러 모듈 921(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 910 또는 상기 셀룰러 모듈 921은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 Wifi 모듈 923, 상기 BT 모듈 925, 상기 GPS 모듈 927 또는 상기 NFC 모듈 928 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 9에서는 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927 또는 NFC 모듈 928이 각각 별개의 블록으로 도시되었으나, 한 실시예에 따르면, 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927 또는 NFC 모듈 928 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927 또는 NFC 모듈 928 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 921에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈 923에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈 929는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 929는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 929는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 9에서는 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927 및 NFC 모듈 928이 하나의 RF 모듈 929을 서로 공유하는 것으로 도시되어 있으나, 한 실시예에 따르면, 셀룰러 모듈 921, Wifi 모듈 923, BT 모듈 925, GPS 모듈 927 또는 NFC 모듈 928 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 924는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 924는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 930(예: 상기 메모리 130)는 내장 메모리 932 또는 외장 메모리 934를 포함할 수 있다. 상기 내장 메모리 932는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 내장 메모리 932는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 934는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 934는 다양한 인터페이스를 통하여 상기 전자 장치 901과 기능적으로 연결될 수 있다. 한 실시예에 따르면, 상기 전자 장치 901는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈 940은 물리량을 계측하거나 전자 장치 901의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 940은, 예를 들면, 제스처 센서 940A, 자이로 센서 940B, 기압 센서 940C, 마그네틱 센서 940D, 가속도 센서 940E, 그립 센서 940F, 근접 센서 940G, color 센서 940H(예: RGB(red, green, blue) 센서), 생체 센서 940I, 온/습도 센서 940J, 조도 센서 940K 또는 UV(ultra violet) 센서 940M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 940은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 940은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 장치 950은 터치 패널(touch panel) 952, (디지털) 펜 센서(pen sensor) 954, 키(key) 956 또는 초음파(ultrasonic) 입력 장치 958를 포함할 수 있다. 상기 터치 패널 952은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 952은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 952은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 952은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 954는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 956는, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 958는 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 901에서 마이크(예: 마이크 988)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 전자 장치 901는 상기 통신 모듈 920를 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 960(예: 상기 디스플레이 150)은 패널 962, 홀로그램 장치 964 또는 프로젝터 966을 포함할 수 있다. 상기 패널 962은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 962은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 962은 상기 터치 패널 952과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 964은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 966는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 901의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 상기 디스플레이 960은 상기 패널 962, 상기 홀로그램 장치 964, 또는 프로젝터 966를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 970는, 예를 들면, HDMI(high-definition multimedia interface) 972, USB(universal serial bus) 974, 광 인터페이스(optical interface) 976 또는 D-sub(D-subminiature) 978를 포함할 수 있다. 상기 인터페이스 970는, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 970는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 980은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 980의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 980은, 예를 들면, 스피커 982, 리시버 984, 이어폰 986 또는 마이크 988 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 991은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬 (flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈 995은 상기 전자 장치 901의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈 995은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 996의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 996는 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 901에 전원을 공급할 수 있다. 상기 배터리 996는, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 997는 상기 전자 장치 901 혹은 그 일부(예: 상기 AP 910)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 998는 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 901는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
그리고 본 명세서와 도면에 개시된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
A: 제1 이미지
B: 제2 이미지
BA: 블록영역
LA: 좌 이미지
RB: 우 이미지

Claims (20)

  1. 이미지를 표시하는 전자 장치에 있어서,
    표시 모듈; 및
    제1이미지의 블록영역의 크기 또는 위치를 결정하고,
    상기 블록영역의 크기에 대응하여 제2이미지를 변경하며,
    상기 제1이미지 및 상기 변경된 제2이미지를 교대로 표시하기 위한 듀티 주기 및 출력 순서를 결정하고,
    상기 블록영역이 포함된 제1이미지와 상기 변경된 제2이미지를 상기 결정된 듀티 주기 및 출력 순서에 따라 교대로 표시하도록 제어하는 제어 모듈을 포함하는 전자 장치.
  2. 제1항에 있어서,
    카메라; 및
    통신 모듈을 더 포함하고,
    상기 제어 모듈은,
    상기 카메라로부터 상기 제2 이미지를 수신하거나, 또는 상기 통신 모듈을 통해 외부 장치로부터 상기 제2 이미지를 수신하는, 전자 장치.
  3. 제2항에 있어서,
    상기 카메라는,
    상기 표시 모듈과 대향하는 상기 전자 장치의 일면에 장착되는, 전자 장치.
  4. 제1항에 있어서,
    상기 제어 모듈은,
    상기 전자 장치에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정하는, 전자 장치.
  5. 제1항에 있어서,
    상기 제어 모듈은,
    상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경하는, 전자 장치.
  6. 제1항에 있어서,
    상기 전자 장치가 좌 렌즈부 및 우 렌즈부를 포함하는 헤드 마운트형 장치(Head Mounted Device; HMD)인 경우,
    상기 제어 모듈은,
    상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하고, 상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정하는, 전자 장치.
  7. 제6항에 있어서,
    상기 제어 모듈은,
    상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 구분하고, 상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는 상기 제2 우 이미지를 변경하는, 전자 장치.
  8. 제1항에 있어서,
    상기 제어 모듈은,
    한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하고, 상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정하는, 전자 장치.
  9. 삭제
  10. 제1항에 있어서,
    상기 제어 모듈은,
    사용자의 인식률을 기반하여 상기 듀티 주기를 조절하고, 상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하도록 제어하는, 전자 장치.
  11. 전자 장치에서의 이미지 처리 방법에 있어서,
    제1이미지의 블록영역의 크기 또는 위치를 결정하는 동작;
    상기 블록 영역의 크기에 대응하여 제2이미지를 변경하는 동작;
    상기 제1이미지 및 상기 변경된 제2이미지를 교대로 표시하기 위한 듀티 주기 및 출력 순서를 결정하는 동작; 및
    상기 블록영역이 포함된 제1이미지와 상기 변경된 제2이미지를 상기 결정된 듀티 주기 및 출력 순서에 따라 교대로 표시하는 동작을 포함하는 방법.
  12. 제11항에 있어서,
    상기 전자 장치에 장착된 카메라 또는 외부 장치로부터 상기 제2 이미지를 수신하는 동작을 포함하는 방법.
  13. 제12항에 있어서,
    상기 수신하는 동작은,
    표시 모듈과 대향하는 상기 전자 장치의 일면에 장착된 카메라로부터 상기 제2 이미지를 수신하는 동작을 포함하는 방법.
  14. 제11항에 있어서,
    상기 전자 장치에 기설정된 설정값, 사용자의 입력 및 사용자의 눈 사이의 거리 중 적어도 하나에 따라 상기 블록영역의 크기 또는 위치를 설정하는 동작을 더 포함하는 방법.
  15. 제11항에 있어서,
    상기 변경하는 동작은,
    상기 기설정된 블록영역에 대응하여 상기 제2 이미지의 크기, 위치, 비율, 배율 및 해상도 중 적어도 하나를 변경하는 동작을 포함하는 방법.
  16. 제11항에 있어서,
    상기 전자 장치가 좌 렌즈부 및 우 렌즈부를 포함하는 헤드 마운트형 장치인 경우,
    상기 제1 이미지를 제1 좌 이미지 및 제1 우 이미지로 구분하는 동작; 및
    상기 제1 좌 이미지 및 상기 제1 우 이미지 중 적어도 하나에 블록영역의 크기 또는 위치를 설정하는 동작을 더 포함하는 방법.
  17. 제16항에 있어서,
    상기 변경하는 동작은,
    상기 제2 이미지를 제2 좌 이미지 및 제2 우 이미지로 구분하는 동작; 및
    상기 설정된 블록영역에 대응하여 상기 제2 좌 이미지 또는 상기 제2 우 이미지를 변경하는 동작을 포함하는 방법.
  18. 제11항에 있어서,
    상기 듀티 주기 및 출력 순서를 결정하는 동작은,
    한번에 연속적으로 출력할 상기 제1 이미지 또는 상기 변경된 제2 이미지의 프레임 개수를 결정하는 동작; 및
    상기 결정된 프레임 개수에 기반하여 상기 출력순서를 결정하는 동작을 포함하는 방법.
  19. 삭제
  20. 제11항에 있어서,
    상기 교대로 표시하는 동작은,
    사용자의 인식률을 기반하여 상기 듀티 주기를 조절하는 동작; 및
    상기 조절된 듀티 주기 및 상기 출력순서를 기반으로 상기 제1 이미지 및 상기 변경된 제2 이미지를 교대로 표시하는 동작을 포함하는 방법.
KR1020140064491A 2014-05-28 2014-05-28 이미지 처리 방법 및 장치 KR102262086B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140064491A KR102262086B1 (ko) 2014-05-28 2014-05-28 이미지 처리 방법 및 장치
US14/722,399 US9830120B2 (en) 2014-05-28 2015-05-27 Methods and devices for processing images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140064491A KR102262086B1 (ko) 2014-05-28 2014-05-28 이미지 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150136864A KR20150136864A (ko) 2015-12-08
KR102262086B1 true KR102262086B1 (ko) 2021-06-09

Family

ID=54701794

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140064491A KR102262086B1 (ko) 2014-05-28 2014-05-28 이미지 처리 방법 및 장치

Country Status (2)

Country Link
US (1) US9830120B2 (ko)
KR (1) KR102262086B1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105518487B (zh) * 2014-10-27 2017-09-12 深圳市大疆创新科技有限公司 飞行器的位置提示方法及装置
GB2548346B (en) * 2016-03-11 2020-11-18 Sony Interactive Entertainment Europe Ltd Image processing method and apparatus
WO2018044073A1 (en) * 2016-09-01 2018-03-08 Samsung Electronics Co., Ltd. Image streaming method and electronic device for supporting the same
TWI628645B (zh) * 2016-11-11 2018-07-01 瑞鼎科技股份有限公司 驅動電路及其運作方法
US20180137809A1 (en) * 2016-11-11 2018-05-17 Raydium Semiconductor Corporation Driving circuit and operating method thereof
TWI637374B (zh) * 2016-11-11 2018-10-01 瑞鼎科技股份有限公司 驅動電路及其運作方法
CN106932910B (zh) * 2017-05-06 2019-05-10 上海蒙彤文化传播有限公司 一种适用于柔性屏手机的vr眼镜
US10313645B1 (en) * 2018-01-19 2019-06-04 Microsoft Technology Licensing, Llc Variable emission period for scanned-beam display
CN110582022B (zh) * 2019-09-27 2022-12-30 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN114297436A (zh) * 2021-01-14 2022-04-08 海信视像科技股份有限公司 一种显示设备及用户界面主题更新方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100103318A1 (en) * 2008-10-27 2010-04-29 Wistron Corporation Picture-in-picture display apparatus having stereoscopic display functionality and picture-in-picture display method
US20100271545A1 (en) 2009-04-28 2010-10-28 Canon Kabushiki Kaisha Display apparatus and control method thereof
US20110157160A1 (en) 2009-12-28 2011-06-30 Ushiki Suguru Three-Dimensional Image Generating Device, Three-Dimensional Image Display Device, Three-Dimensional Image Generating Method, and Program
WO2013108285A1 (ja) * 2012-01-16 2013-07-25 パナソニック株式会社 画像記録装置、立体画像再生装置、画像記録方法、及び立体画像再生方法

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777665A (ja) * 1993-03-29 1995-03-20 Canon Inc 画像表示装置及びその為の画像撮影装置
JP3245478B2 (ja) * 1993-04-27 2002-01-15 オリンパス光学工業株式会社 頭部装着式表示装置
DE69421873T2 (de) * 1993-09-20 2000-06-15 Canon Kk Bildaufnahme- und anzeigesystem
JP3256619B2 (ja) * 1993-12-24 2002-02-12 株式会社東芝 文字情報表示装置
JP3508796B2 (ja) * 1995-09-18 2004-03-22 ソニー株式会社 テレビ受信機における選局及び表示方法
JPH10243359A (ja) * 1997-02-25 1998-09-11 Sanyo Electric Co Ltd テレビジョン受像機
US7206029B2 (en) * 2000-12-15 2007-04-17 Koninklijke Philips Electronics N.V. Picture-in-picture repositioning and/or resizing based on video content analysis
JP4364002B2 (ja) * 2004-02-06 2009-11-11 オリンパス株式会社 頭部装着型カメラ及び頭部装着型カメラによる撮影方法
US7920165B2 (en) * 2005-09-26 2011-04-05 Adderton Dennis M Video training system
JP2007193254A (ja) 2006-01-23 2007-08-02 Konica Minolta Photo Imaging Inc 映像表示装置
GB2435360B (en) * 2006-02-16 2009-09-23 Imagination Tech Ltd Method and apparatus for determining motion between video images
KR100817315B1 (ko) * 2006-09-25 2008-03-27 삼성전자주식회사 터치 스크린을 갖는 디지털 방송 수신용 휴대 단말기 및그의 pip 화면 제어 방법
JP4689639B2 (ja) * 2007-04-25 2011-05-25 キヤノン株式会社 画像処理システム
WO2009015375A1 (en) * 2007-07-26 2009-01-29 Real D Head-mounted single panel stereoscopic display
US20100259471A1 (en) * 2007-11-16 2010-10-14 Nikon Corporation Control device, head-mount display device, program, and control method
US8957835B2 (en) * 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
WO2010047210A1 (ja) * 2008-10-20 2010-04-29 日本電気株式会社 画像表示システム、画像表示装置および光シャッタ
US9185328B2 (en) * 2009-06-08 2015-11-10 Lg Electronics Inc. Device and method for displaying a three-dimensional PIP image
WO2011097564A1 (en) * 2010-02-05 2011-08-11 Kopin Corporation Touch sensor for controlling eyewear
GB2479932A (en) * 2010-04-30 2011-11-02 Sony Corp Stereoscopic camera system with two cameras having synchronised control functions
EP2385706A1 (en) * 2010-05-03 2011-11-09 LG Electronics Image display device, viewing device and methods for operating the same
US20110316972A1 (en) * 2010-06-29 2011-12-29 Broadcom Corporation Displaying graphics with three dimensional video
KR101330412B1 (ko) * 2010-08-23 2013-11-15 엘지디스플레이 주식회사 입체영상 표시장치 및 그 구동방법
US9111498B2 (en) * 2010-08-25 2015-08-18 Eastman Kodak Company Head-mounted display with environmental state detection
US8780014B2 (en) * 2010-08-25 2014-07-15 Eastman Kodak Company Switchable head-mounted display
CN103081498B (zh) * 2010-09-01 2017-05-17 Lg电子株式会社 数字接收器和用于在数字接收器中处理3d内容的方法
KR101691833B1 (ko) * 2010-11-04 2017-01-09 엘지전자 주식회사 이동 단말기 및 이것의 영상 촬영 제어 방법
WO2012090325A1 (ja) * 2010-12-28 2012-07-05 トヨタ自動車株式会社 ナビゲーション装置
US8953242B2 (en) * 2011-03-31 2015-02-10 Honeywell International Inc. Varible focus stereoscopic display system and method
CN102654994B (zh) * 2011-07-07 2014-08-06 京东方科技集团股份有限公司 双视显示器显示方法和双视显示器
US8217856B1 (en) * 2011-07-27 2012-07-10 Google Inc. Head-mounted display that displays a visual representation of physical interaction with an input interface located outside of the field of view
US8977205B2 (en) * 2011-10-06 2015-03-10 Symbol Technologies, Inc. Head-mounted computer with peripheral expansion port
KR20130060041A (ko) * 2011-11-29 2013-06-07 삼성전자주식회사 입체영상표시장치 및 방법, 입체영상수신장치 및 방법
US20130155325A1 (en) * 2011-12-16 2013-06-20 General Instrument Corporation Region of interest selection, decoding and rendering of picture-in-picture window
EP2621179A1 (en) * 2012-01-30 2013-07-31 Samsung Electronics Co., Ltd. Display apparatus and method for providing multi-view thereof
EP2893388B1 (en) * 2012-09-03 2016-08-03 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Head mounted system and method to compute and render a stream of digital images using a head mounted system
US8482527B1 (en) * 2012-09-14 2013-07-09 Lg Electronics Inc. Apparatus and method of providing user interface on head mounted display and head mounted display thereof
KR102081934B1 (ko) * 2013-08-28 2020-02-26 엘지전자 주식회사 헤드 마운트 디스플레이 디바이스 및 그 제어 방법
US9824498B2 (en) * 2014-12-30 2017-11-21 Sony Interactive Entertainment Inc. Scanning display system in head-mounted display for virtual reality

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100103318A1 (en) * 2008-10-27 2010-04-29 Wistron Corporation Picture-in-picture display apparatus having stereoscopic display functionality and picture-in-picture display method
US20100271545A1 (en) 2009-04-28 2010-10-28 Canon Kabushiki Kaisha Display apparatus and control method thereof
US20110157160A1 (en) 2009-12-28 2011-06-30 Ushiki Suguru Three-Dimensional Image Generating Device, Three-Dimensional Image Display Device, Three-Dimensional Image Generating Method, and Program
WO2013108285A1 (ja) * 2012-01-16 2013-07-25 パナソニック株式会社 画像記録装置、立体画像再生装置、画像記録方法、及び立体画像再生方法

Also Published As

Publication number Publication date
US9830120B2 (en) 2017-11-28
US20150347074A1 (en) 2015-12-03
KR20150136864A (ko) 2015-12-08

Similar Documents

Publication Publication Date Title
KR102262086B1 (ko) 이미지 처리 방법 및 장치
US9946393B2 (en) Method of controlling display of electronic device and electronic device
KR102271833B1 (ko) 전자 장치, 그 제어 방법 및 기록 매체
KR102180528B1 (ko) 색맹 교정을 위한 전자 장치 및 운영 방법
KR102310130B1 (ko) 착용 가능한 전자 장치
KR102327803B1 (ko) 전력 소모를 줄이기 위한 전력 제어 방법 및 장치
KR102266730B1 (ko) 전자 장치
KR102360453B1 (ko) 카메라 설정 방법 및 장치
KR102414356B1 (ko) 전자 장치 및 그의 햅틱 피드백 제공 방법
KR102294945B1 (ko) 기능 제어 방법 및 그 전자 장치
KR102266468B1 (ko) 초점 제어 방법 및 그 전자 장치
KR20160020189A (ko) 이미지 처리 방법 및 그 장치
KR20150139214A (ko) 이미지를 처리하기 위한 방법 및 장치
KR102266882B1 (ko) 전자장치의 화면 표시 방법
KR20150141808A (ko) 구도 정보를 이용하는 전자 장치 및 이를 이용하는 촬영 방법
KR102523988B1 (ko) 곡선 표시 영역을 포함하는 디스플레이의 구동 방법과 이를 지원하는 디스플레이 구동 회로 및 이를 포함하는 전자 장치
KR20160035859A (ko) 사용자 인증 방법 및 그 전자 장치
KR20150127989A (ko) 사용자 인터페이스 제공 방법 및 장치
KR20150094289A (ko) 전자 장치의 촬영 방법 및 그 전자 장치
KR102277353B1 (ko) 영상 처리 방법 및 전자 장치
KR102319286B1 (ko) 드래그 앤 드롭 처리 방법 및 장치
KR20150135837A (ko) 디스플레이 운용 전자장치 및 방법
KR20160055337A (ko) 텍스트 표시 방법 및 그 전자 장치
KR20160001438A (ko) 이어 잭 오작동을 방지하는 전자 장치 및 방법
KR20150137472A (ko) 전자 장치의 컨텐츠 출력 방법 및 이를 사용하는 전자 장치

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant