KR20120029229A - Transparent display device and method for providing local information - Google Patents

Transparent display device and method for providing local information Download PDF

Info

Publication number
KR20120029229A
KR20120029229A KR1020100091194A KR20100091194A KR20120029229A KR 20120029229 A KR20120029229 A KR 20120029229A KR 1020100091194 A KR1020100091194 A KR 1020100091194A KR 20100091194 A KR20100091194 A KR 20100091194A KR 20120029229 A KR20120029229 A KR 20120029229A
Authority
KR
South Korea
Prior art keywords
transparent display
information
region
area
displayed
Prior art date
Application number
KR1020100091194A
Other languages
Korean (ko)
Other versions
KR101663619B1 (en
Inventor
박희연
주연주
박선주
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020100091194A priority Critical patent/KR101663619B1/en
Priority to EP11179960.7A priority patent/EP2431895B1/en
Priority to US13/232,787 priority patent/US20120069050A1/en
Priority to CN201110276141.2A priority patent/CN102402390B/en
Publication of KR20120029229A publication Critical patent/KR20120029229A/en
Application granted granted Critical
Publication of KR101663619B1 publication Critical patent/KR101663619B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof

Abstract

PURPOSE: A transparent display apparatus and local information providing method are provided to improve the utilization of information by interlocking the information of a specific area with the information of a local area. CONSTITUTION: A transparent display apparatus selects a part of a background image which is able to be watched through a transparent display unit(S1030). The transparent display apparatus displays one or more menus and captured image on the transparent display unit(S1040). When the displayed menu is selected, the transparent display apparatus displays a screen related to the selected menu(S1050, S1060). The displayed screen includes a part of a map.

Description

투명 디스플레이 장치 및 지역 정보 제공 방법{Transparent display device and method for providing local information}Transparent display device and method for providing local information}

본 발명은 투명 디스플레이 장치 및 지역 정보 제공 방법에 관한 것으로, 보다 상세하게는, 투명 디스플레이를 통해 지역 정보를 제공하기 위한 투명 디스플레이 장치 및 지역 정보 제공 방법에 관한 것이다.The present invention relates to a transparent display device and a method for providing local information, and more particularly, to a transparent display device and a method for providing local information for providing local information through a transparent display.

방송 수신기, 개인용 컴퓨터, 노트북, 휴대폰 등과 같은 전자기기는 다양한 기능을 수행할 수 있도록 구성될 수 있다. 그러한 다양한 기능들의 예로 방송 수신 기능, 데이터 및 음성 통신 기능, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 스피커 시스템을 통한 음악 파일의 재생 기능, 이미지나 비디오의 디스플레이 기능 등이 있다. 일부 단말기는 게임을 실행할 수 있는 추가적 기능을 포함할 수 있다.Electronic devices such as broadcast receivers, personal computers, notebook computers, mobile phones, and the like may be configured to perform various functions. Examples of such various functions include broadcast reception function, data and voice communication function, taking a picture or video through a camera, a voice recording function, a music file playing function through a speaker system, and an image or video display function. Some terminals may include additional functionality to play games.

또한 최근 영상 기술 및 투명 전자 소자 개발 기술이 발달하면서, 후방의 객체가 보이는 한편 디스플레이가 가능한 투명 디스플레이 패널이 활발하게 연구되고 있으며, 전자기기는 디스플레이 패널로 투명 디스플레이 패널을 이용하여 영상 및 데이터를 디스플레이하고 있다. 이러한 투명 디스플레이 패널로 자발광을 이용하는 유기 발광 패널이나 플라즈마 패널이 널리 사용되고 있다.In addition, with the development of image technology and transparent electronic device development technology, transparent display panels capable of displaying objects and displaying behind them are being actively researched, and electronic devices display images and data using transparent display panels as display panels. Doing. As such a transparent display panel, an organic light emitting panel or a plasma panel using self-luminescence is widely used.

본 발명이 이루고자 하는 기술적 과제는 투명 디스플레이를 통해 보이는 배경에 대한 정보를 제공하는 투명 디스플레이 장치 및 지역 정보 제공 방법을 제공하는 데 있다.SUMMARY OF THE INVENTION The present invention has been made in an effort to provide a transparent display device and a method for providing local information that provide information on a background viewed through a transparent display.

본 발명이 이루고자 하는 다른 기술적 과제는 투명 디스플레이를 통해 보이는 배경의 특정 영역에 해당하는 지역에 대한 정보를 획득하고, 획득된 정보를 기초로 통신 서비스를 제공하는 투명 디스플레이 장치 및 지역 정보 제공 방법을 제공하는 데 있다.Another technical problem to be achieved by the present invention is to provide a transparent display device and a method of providing local information, which acquires information on a region corresponding to a specific area of a background visible through a transparent display and provides a communication service based on the obtained information. There is.

상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 지역 정보 제공 방법은, 투명 디스플레이를 통해 보이는 배경의 일부 영역을 선택하는 단계, 투명 디스플레이 상에 상기 선택된 일부 영역이 촬상된 이미지 및 적어도 하나의 메뉴를 디스플레이하는 단계, 및 상기 디스플레이된 적어도 하나의 메뉴 중 하나를 선택받으면, 선택된 메뉴와 연관된 화면을 디스플레이하며, 상기 디스플레이된 화면은 상기 일부 영역의 지도를 포함하는 단계를 포함할 수 있다. 여기서, 상기 디스플레이된 적어도 하나의 메뉴는 지역 상세 표시 메뉴 및 연결 표시 메뉴 중 하나일 수 있다. 또한 상기 선택된 일부 영역은 인식된 제스처에 따라 변경될 수 있다.According to an aspect of the present invention, there is provided a method of providing region information, selecting a partial region of a background visible through a transparent display, an image of the selected partial region photographed on the transparent display, and at least one menu And displaying a screen associated with the selected menu when one of the displayed at least one menu is selected, wherein the displayed screen includes a map of the partial area. Here, the displayed at least one menu may be one of a region detail display menu and a connection display menu. In addition, the selected partial region may be changed according to the recognized gesture.

또한, 상기 디스플레이된 화면은 지점 정보를 표시하기 위한 적어도 하나의 정보 표시 객체를 더 포함하고, 상기 적어도 하나의 정보 표시 객체는 각각 표시할 지점 정보와 연관된 지점에 위치할 수 있다.The displayed screen may further include at least one information display object for displaying point information, and each of the at least one information display object may be located at a point associated with point information to be displayed.

또한, 상기 디스플레이된 화면은 특정 사람을 지시하는 적어도 하나의 연결 객체를 더 포함하고, 상기 적어도 하나의 연결 객체는 각각 지시하는 사람이 위치하는 지점에 표시될 수 있다. 여기서, 상기 적어도 하나의 연결 객체 중에 하나가 선택되면, 상기 선택된 연결 객체가 지시하는 사람의 연락 정보를 기초로 신호를 전송할 수 있다.In addition, the displayed screen may further include at least one connection object indicating a specific person, and the at least one connection object may be displayed at a point where the indicating person is located. Here, when one of the at least one connection object is selected, a signal may be transmitted based on contact information of a person indicated by the selected connection object.

상기 일부 영역을 선택하는 단계는, 상기 투명 디스플레이 상의 제1 위치에서 다운 이벤트(down event)를 검출하는 단계, 투명 디스플레이 상의 제2 위치에서 업 이벤트(up event)를 검출하는 단계, 및 상기 제1 위치 및 상기 제2 위치를 포함하는 영역을 통해 보이는 배경을 상기 일부 영역으로 선택하는 단계를 포함할 수 있다.Selecting the partial region may include detecting a down event at a first location on the transparent display, detecting an up event at a second location on the transparent display, and detecting the first event. And selecting the background visible through the area including the location and the second location as the partial area.

또는 상기 일부 영역을 선택하는 단계는, 지역 선택 정보를 입력받는 단계, 시선 방향을 결정하는 단계, 및 상기 입력된 지역 선택 정보에 따라 선택된 투명 디스플레이 영역 내에서 상기 결정된 시선 방향에서 상기 투명 디스플레이를 통해 보이는 배경을 상기 일부 영역으로 선택하는 단계를 포함할 수 있다.Alternatively, the selecting of the partial region may include receiving region selection information, determining a gaze direction, and through the transparent display in the determined gaze direction within the transparent display area selected according to the input region selection information. And selecting a visible background as the partial region.

상기 시선 방향을 결정하는 단계는, 찰영 장치를 통하여 촬상된 영상 중에서 얼굴 영역을 검출하는 단계 및 상기 검출된 얼굴 영역을 이용하여 시선 방향을 결정하는 단계를 포함할 수 있다. 또는 상시 시선 방향을 결정하는 단계에서, 상기 시선 방향은 상기 투명 디스플레이의 방향과 수직 방향으로 결정될 수 있다.The determining of the gaze direction may include detecting a face area from an image photographed by the imaging apparatus, and determining a gaze direction by using the detected face area. Alternatively, in the determining the normal gaze direction, the gaze direction may be determined in a direction perpendicular to the direction of the transparent display.

상기의 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 투명 디스플레이 장치는, 배경을 투과하는 투명 디스플레이, 상기 투명 디스플레이를 통해 보이는 배경의 일부 영역을 선택하고, 상기 투명 디스플레이 상에 상기 선택된 일부 영역이 촬상된 이미지 및 적어도 하나의 메뉴가 디스플레이되도록 제어하고, 상기 디스플레이된 적어도 하나의 메뉴 중 하나를 선택받는 경우에는, 선택된 메뉴와 연관된 화면이 디스플레이되도록 제어하는 제어부를 포함하고, 상기 디스플레이된 화면은 상기 일부 영역의 지도를 포함할 수 있다. 여기서, 상기 디스플레이된 적어도 하나의 메뉴는 지역 상세 표시 메뉴 및 연결 표시 메뉴 중 하나일 수 있다. 또한 상기 선택된 일부 영역은 인식된 제스처에 따라 변경될 수 있다.According to another aspect of the present invention, there is provided a transparent display device including a transparent display that transmits a background, a partial region of a background visible through the transparent display, and the selected partial region on the transparent display. And a control unit configured to control to display the captured image and at least one menu, and to display a screen associated with the selected menu when one of the displayed at least one menu is selected. It may contain maps of some areas. Here, the displayed at least one menu may be one of a region detail display menu and a connection display menu. In addition, the selected partial region may be changed according to the recognized gesture.

또한 상기 디스플레이된 화면은 지점 정보를 표시하기 위한 적어도 하나의 정보 표시 객체를 더 포함하고, 상기 적어도 하나의 정보 표시 객체는 각각 표시할 지점 정보와 연관된 지점에 위치할 수 있다. The displayed screen may further include at least one information display object for displaying point information, and each of the at least one information display object may be located at a point associated with point information to be displayed.

또한 상기 디스플레이된 화면은 특정 사람을 지시하는 적어도 하나의 연결 객체를 더 포함하고, 상기 적어도 하나의 연결 객체는 각각 지시하는 사람이 위치하는 지점에 표시될 수 있다. 상기 제어부는, 상기 적어도 하나의 연결 객체 중에 하나가 선택된 경우에는, 상기 선택된 연결 객체가 지시하는 사람의 연락 정보를 기초로 신호가 전송되도록 제어할 수 있다.In addition, the displayed screen may further include at least one connection object indicating a specific person, and the at least one connection object may be displayed at a point where the indicating person is located. When one of the at least one connection object is selected, the controller may control to transmit a signal based on contact information of a person indicated by the selected connection object.

상기 제어부는, 상기 투명 디스플레이 상의 제1 위치에서 다운 이벤트(down event)를 검출하고, 투명 디스플레이 상의 제2 위치에서 업 이벤트(up event)를 검출하며, 상기 제1 위치 및 상기 제2 위치를 포함하는 영역을 통해 보이는 배경을 상기 일부 영역으로 선택할 수 있다.The controller detects a down event at a first position on the transparent display, detects an up event at a second position on the transparent display, and includes the first position and the second position. The background visible through the region may be selected as the partial region.

상기 투명 디스플레이 장치는 지역 선택 정보를 입력받는 입력장치를 더 포함하고, 상기 제어부는 시선 방향을 결정하고, 상기 입력된 지역 선택 정보에 따라 선택된 투명 디스플레이 영역 내에서 상기 결정된 시선 방향에서 상기 투명 디스플레이를 통해 보이는 배경을 상기 일부 영역으로 선택할 수 있다.The transparent display device further includes an input device configured to receive region selection information, and the controller determines a gaze direction, and controls the transparent display in the determined gaze direction within the transparent display area selected according to the input area selection information. The visible background may be selected as the partial region.

상기 제어부는, 찰영 장치를 통하여 촬상된 영상 중에서 얼굴 영역을 검출하고, 상기 검출된 얼굴 영역을 이용하여 시선 방향을 결정할 수 있다. 또는 상기 제어부는, 상기 투명 디스플레이의 방향과 수직 방향을 시선 방향으로 결정할 수 있다.The controller may detect a face region from the image photographed by the imaging apparatus, and determine a gaze direction by using the detected face region. Alternatively, the controller may determine a direction perpendicular to the direction of the transparent display as the visual line direction.

본 발명에 따른 투명 디스플레이 장치 및 지역 정보 제공 방법에 의하면, 투명 디스플레를 통해 보이는 배경 중에서 특정 영역에 해당 하는 지역 정보 및 지역 정보와 연관된 서비스를 제공함으로, 사용자는 배경에 대한 정보를 별도로 검색하지 않고 자동으로 제공받을 수 있다.According to the transparent display device and the method for providing region information according to the present invention, a user is provided with a service related to region information and region information corresponding to a specific region among the backgrounds displayed through the transparent display, so that the user does not separately search for the background information. Can be provided automatically.

도 1은 본 발명에 따른 지역 정보 제공 시스템에 대한 바람직한 일실시예 구성을 도시한 도면,
도 2는 투명 디스플레이를 통해 보이는 배경을 도시한 도면,
도 3a 내지 도 3c는 지역 선택 정보가 입력되는 방식의 일실시예를 도시한 도면,
도 4는 배경의 일부 영역이 촬상된 이미지를 디스플레이한 화면의 일예를 도시한 도면,
도 5는 배경의 일부 영역에 대한 지도를 디스플레이한 화면의 일예를 도시한 도면,
도 6은 도 5의 지도를 배경으로 지점 정보를 디스플레이한 화면의 일예를 도시한 도면,
도 7은 배경의 일부 영역에 대한 지도를 디스플레이한 화면의 다른 예를 도시한 도면,
도 8은 본 발명에 따른 투명 디스플레이 장치에 대한 바람직한 일실시예의 구성을 도시한 블록도,
도 9는 투명 디스플레이 장치의 제어부에 대한 바람직한 일실시예의 구성을 도시한 블록도,
도 10은 본 발명에 따른 지역 정보 제공 방법에 대한 바람직한 일실시예의 수행과정을 도시한 블록도,
도 11a 내지 도 11d는 선택된 배경의 일부 영역 및 인식된 제스처가 디스플레이된 화면을 도시한 도면,
도 12는 시선 방향 인식 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면,
도 13은 본 발명에 따른 지역 정보 제공 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면, 그리고,
도 14는 본 발명에 따른 투명 디스플레이 장치에 대한 바람직한 다른 실시예의 구성을 도시한 블록도이다.1 is a view showing a preferred embodiment configuration for a local information providing system according to the present invention,
2 illustrates a background visible through a transparent display;
3A to 3C illustrate an embodiment of a method of inputting region selection information;
4 is a diagram illustrating an example of a screen displaying an image in which a part of a background is photographed;
5 is a diagram illustrating an example of a screen displaying a map of a partial region of a background;
6 is a diagram illustrating an example of a screen displaying point information with a map of FIG. 5 as a background;
7 is a diagram illustrating another example of a screen displaying a map of a part of a background;
8 is a block diagram showing the configuration of a preferred embodiment of a transparent display device according to the present invention;
9 is a block diagram showing a configuration of a preferred embodiment of the control unit of the transparent display device;
10 is a block diagram showing a process of performing an embodiment of a method for providing region information according to the present invention;
11A through 11D illustrate screens on which a partial region of a selected background and recognized gestures are displayed;
12 is a flowchart illustrating a preferred embodiment of a gaze direction recognition method;
13 is a view showing a process of performing another preferred embodiment of the method for providing region information according to the present invention;
14 is a block diagram showing the configuration of another preferred embodiment of a transparent display device according to the present invention.

이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.Hereinafter, with reference to the accompanying drawings, preferred embodiments of the present invention that can specifically realize the above object will be described. At this time, the configuration and operation of the present invention shown in the drawings and described by it will be described as at least one embodiment, by which the technical spirit of the present invention and its core configuration and operation is not limited.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.The terms used in the present invention have been selected as general terms widely used as possible in consideration of the functions in the present invention, but may vary according to the intention or custom of a person skilled in the art or the emergence of a new technology. In addition, in certain cases, there is also a term arbitrarily selected by the applicant, in which case the meaning will be described in detail in the description of the invention. Therefore, it is intended that the terms used in the present invention should be defined based on the meanings of the terms and the general contents of the present invention rather than the names of the simple terms.

도 1은 본 발명에 따른 지역 정보 제공 시스템에 대한 바람직한 일실시예 구성을 도시한 도면이다.1 is a view showing a preferred embodiment configuration for a local information providing system according to the present invention.

도 1을 참조하면, 본 발명에 따른 지역 정보 제공 시스템(1)은 지역 정보 제공 서버(10), 위치 응용 서버(20), 네트워크(50, 60) 및 투명 디스플레이 장치(100)를 포함할 수 있다.Referring to FIG. 1, the regional information providing system 1 according to the present invention may include a regional information providing server 10, a location application server 20, networks 50 and 60, and a transparent display device 100. have.

지역 정보 제공 서버(10)는 지역 이미지, 위치 정보, 지역에 대한 정보, 지역 이미지 및 지역에 대한 정보를 연관하는 연관정보, 및 위치 정보 및 지역에 대한 정보를 연관하는 연관정보를 저장할 수 있다. 또한 지역에 대한 정보는 지역명칭, 지역에 포함된 각 지점에 대한 지점 정보, 지역의 지도, 지역 소개 중 적어도 하나를 포함할 수 있다. 그리고 지역에 대한 정보는 지역 정보라고 명명하고, 지역 이미지는 지역이 촬상된 이미지이다.The region information providing server 10 may store region image, location information, region information, association information relating region information and region information, and association information relating position information and region information. In addition, the information on the region may include at least one of the name of the region, point information for each point included in the region, a map of the region, the region introduction. The information about the region is called region information, and the region image is an image of the region.

연관정보는 정보와 정보를 맵핑하는 정보이며, 일예로, 연관정보는 관계 데이터베이스 시스템에서 하나의 테이블명일 수 있다. 지역 정보 제공 서버(10)는 특정 지역 이미지와 매핑하는 지역 정보를 연관정보를 통해 검색할 수 있고, 위치 정보와 매핑하는 지역 정보를 연관정보를 통해 검색할 수 있다.The association information is information mapping information and information. For example, the association information may be one table name in a relational database system. The local information providing server 10 may search for local information that maps to a specific region image through related information, and may search for local information that maps to location information through related information.

지역 정보 제공 서버(10)는 투명 디스플레이 장치(100)로부터 검색 요청 신호를 수신할 수 있다. 여기서 검색 요청 신호는 탐지된 지역의 이미지 및 위치 정보 중 적어도 하나를 포함할 수 있다. 탐지된 지역의 이미지는 투명 디스플레이 장치(100)가 촬상한 사진일 수 있고, 상기 촬상한 사진으로부터 추출된 지역 이미지일 수 있다.The local information providing server 10 may receive a search request signal from the transparent display device 100. The search request signal may include at least one of an image and location information of the detected area. The detected region image may be a photograph taken by the transparent display apparatus 100, or may be a region image extracted from the photographed photograph.

투명 디스플레이 장치(100)로부터 탐지된 지역의 이미지를 포함하는 검색 요청 신호를 수신하면, 지역 정보 제공 서버(10)는 수신된 이미지로부터 해당 지역을 인식하고, 인식된 지역에 대한 정보를 검색할 수 있다. 그리고 지역 정보 제공 서버(10)는 검색된 지역에 대한 정보를 투명 디스플레이 장치(100)로 전송할 수 있다. 여기서 지역 정보 제공 서버(10)는 수신된 이미지와 저장된 지역 이미지를 비교하는 과정을 통해 지역을 인식할 수 있다. 즉 지역 정보 제공 서버(10)는 수신된 이미지에 포함된 지역 이미지와 동일 또는 가장 유사한 지역 이미지를 발견하고, 발견된 지역 이미지 및 저장된 연관정보를 이용하여 상기 인식된 지역에 대한 정보를 검색할 수 있다.When the search request signal including the image of the detected region is received from the transparent display device 100, the region information providing server 10 may recognize the region from the received image and search for information on the recognized region. have. The area information providing server 10 may transmit information about the searched area to the transparent display device 100. Here, the area information providing server 10 may recognize the area by comparing the received image with the stored area image. That is, the local information providing server 10 may discover a local image identical or most similar to the local image included in the received image, and search for the information on the recognized region by using the found local image and the stored related information. have.

투명 디스플레이 장치(100)로부터 탐지된 지역의 위치 정보를 포함하는 검색요청 신호를 수신하면, 지역 정보 제공 서버(10)는 수신된 위치 정보와 매핑되는 지역을 결정하고, 결정된 지역에 대한 정보를 검색할 수 있다. 그리고 지역 정보 제공 서버(10)는 검색된 지역에 대한 정보를 투명 디스플레이 장치(100)로 전송할 수 있다. 여기서 지역 정보 제공 서버(10)는 수신된 위치 정보와 저장된 연관정보를 이용하여 상기 결정된 지역에 대한 정보를 검색할 수 있다.When receiving the search request signal including the location information of the detected area from the transparent display device 100, the area information providing server 10 determines the area to be mapped with the received location information, and retrieves information on the determined area. can do. The area information providing server 10 may transmit information about the searched area to the transparent display device 100. Here, the area information providing server 10 may search for information on the determined area by using the received location information and the stored related information.

투명 디스플레이 장치(100)로부터 탐지된 지역의 이미지 및 위치 정보를 포함하는 검색 요청 신호를 수신하면, 지역 정보 제공 서버(10)는 수신된 지역의 이미지 및 위치 정보를 기초로 해당 지역을 인식하고, 인식된 지역에 대한 정보를 검색할 수 있다. 그리고 지역 정보 제공 서버(10)는 검색된 지역에 대한 정보를 투명 디스플레이 장치(100)로 전송할 수 있다. 여기서 지역 정보 제공 서버(10)는 지역의 이미지에 포함된 지역 이미지와 매핑하는 지역 정보들 중에서 수신된 위치 정보와 매핑하는 지역 정보에 해당하는 지역 정보를 상기 인식된 지역에 대한 정보로 검출할 수 있다.When receiving the search request signal including the image and location information of the detected area from the transparent display device 100, the area information providing server 10 recognizes the area based on the image and location information of the received area, You can search for information about recognized areas. The area information providing server 10 may transmit information about the searched area to the transparent display device 100. Here, the area information providing server 10 may detect area information corresponding to the received location information and area information mapped from the area information mapped to the area image included in the image of the area as the information on the recognized area. have.

위치 응용 서버(20)는 투명 디스플레이 장치(100)에 위치기반서비스(LBS: Location Based Service)를 제공할 수 있다. 위치 응용 서버(20)는 투명 디스플레이 장치(100)에 특정 지역에 대한 위치 정보를 제공할 수 있고, 특정 위치의 지도 및 지형 정보를 제공할 수 있다. 또한 위치 응용 서버(20)는 특정 지역에 위치하는 지인들에 대한 정보를 투명 디스플레이 장치(100)에 제공할 수 있다.The location application server 20 may provide a location based service (LBS) to the transparent display device 100. The location application server 20 may provide location information of a specific area to the transparent display device 100, and provide map and terrain information of a specific location. In addition, the location application server 20 may provide the transparent display apparatus 100 with information about acquaintances located in a specific area.

지역 정보 제공 서버(10), 위치 응용 서버(20) 및 투명 디스플레이 장치(100)는 네트워크로 연결될 수 있다. 네트워크는 인터넷 또는 인트라넷일 수 있고 BCN(Broadband Convergence Network), uBCN(Ultra Broadband Convergence Network)일 수 있다.The local information providing server 10, the location application server 20, and the transparent display device 100 may be connected to a network. The network may be the Internet or an intranet and may be a Broadband Convergence Network (BCN) or an Ultra Broadband Convergence Network (uBCN).

네트워크는 백본망(60)과 가입자망(50)으로 구성될 수 있다. 백본망(60)은 X.25 망, Frame Relay 망, ATM망, MPLS(Multi Protocol Label Switching) 망 및 GMPLS(Generalized Multi Protocol Label Switching) 망 중 하나 또는 복수의 통합된 망으로 구성될 수 있다. 가입자망(50)은 FTTH(Fiber To The Home), ADSL(Asymmetric Digital Subscriber Line), 케이블망, Wireless LAN(IEEE 802.11b, IEEE 802.11a, IEEE802.11g, IEEE802.11n), WIBro(Wireless Broadband), Wimax 및 HSDPA(High Speed Downlink Packet Access)일 수 있다. 가입자망(50)에 투명 디스플레이 장치(100)가 연결될 수 있다.The network may be composed of a backbone network 60 and a subscriber network 50. The backbone network 60 may be composed of one or a plurality of integrated networks of an X.25 network, a Frame Relay network, an ATM network, a Multi Protocol Label Switching (MPLS) network, and a Generalized Multi Protocol Label Switching (GMPLS) network. Subscriber network 50 includes Fiber To The Home (FTTH), Asymmetric Digital Subscriber Line (ADSL), cable network, Wireless LAN (IEEE 802.11b, IEEE 802.11a, IEEE802.11g, IEEE802.11n), WIBro (Wireless Broadband) , Wimax, and High Speed Downlink Packet Access (HSDPA). The transparent display device 100 may be connected to the subscriber network 50.

투명 디스플레이 장치(100)는 입력된 지역 선택 정보를 기초로 투명 디스플레이를 통해 보이는 배경의 일부 영역을 선택하고, 투명 디스플레이 상에 선택한 일부 영역이 촬상된 이미지 및 적어도 하나의 메뉴를 디스플레이할 수 있다. 또한 투명 디스플레이 장치(100)는 디스플레이한 적어도 하나의 메뉴 중 하나를 선택받으면, 선택된 메뉴와 연관된 화면을 디스플레이할 수 있다.The transparent display apparatus 100 may select a partial region of the background visible through the transparent display based on the input region selection information, and display an image and at least one menu in which the selected partial region is photographed on the transparent display. In addition, when the transparent display device 100 receives one of the at least one displayed menu, the transparent display device 100 may display a screen associated with the selected menu.

도 2는 투명 디스플레이를 통해 보이는 배경을 도시한 도면이다.2 illustrates a background seen through a transparent display.

도 2를 참조하면, 사용자가 영역(210)을 선택하면, 투명 디스플레이 장치(100)는 영역(210)을 통해 보이는 배경을 선택하고, 선택된 배경을 촬상하여 촬상된 지역 이미지를 디스플레이할 수 있다. 여기서 선택된 배경은 투명 디스플레이 방향과 수직 방향에서 영역(210)을 통해 보이는 배경일 수 있고, 사용자가 위치한 방향에서 영역(210)을 통해 보이는 배경일 수 있다.Referring to FIG. 2, when the user selects the area 210, the transparent display device 100 may select a background visible through the area 210, and display the captured area image by capturing the selected background. The selected background may be a background seen through the area 210 in a direction perpendicular to the transparent display direction, or may be a background seen through the area 210 in a direction in which the user is located.

도 3a 내지 도 3c는 지역 선택 정보가 입력되는 방식의 일실시예를 도시한 도면이다.3A to 3C illustrate an embodiment of a method of inputting region selection information.

도 3a 내지 도 3c를 참조하면, 사용자는 지역 선택 정보를 입력하여 영역(210)을 선택할 수 있다. 여기서 지역 선택 정보는 제스처로 입력될 수 있다. 제스처는 단일점(single point) 또는 다중점(multipoint) 제스처, 정적 또는 동적 제스처, 연속적(continuous) 또는 구분된(segmented) 제스처, 및/또는 기타 등등일 수 있다. 단일점 제스처는 단일의 접촉점으로 수행되는 제스처이다, 예를 들어, 이 제스처는 예를 들어 하나의 손가락, 손바닥 또는 스타일러스로부터와 같이 단일의 터치로 수행된다. 다중점 제스처는 다수의 점으로 수행될 수 있는 제스처이다. 예를 들어, 이 제스처는 예를 들어 다수의 손가락, 손가락과 손바닥, 손가락과 스타일러스, 다수의 스타일러스 및/또는 이들의 임의의 조합으로부터와 같이 다수의 터치로 수행된다. 정적 제스처는 움직임을 포함하지 않는 제스처이고, 동적 제스처는 움직임을 포함하는 제스처이다. 연속적 제스처는 단일의 스트로크로 수행되는 제스처이고, 구분된 제스처는 별개의 스텝 또는 스트로크의 시퀀스로 수행되는 제스처이다.3A to 3C, a user may select region 210 by inputting region selection information. In this case, the region selection information may be input by a gesture. The gesture may be a single point or multipoint gesture, a static or dynamic gesture, a continuous or segmented gesture, and / or the like. A single point gesture is a gesture performed with a single point of contact, for example, this gesture is performed with a single touch, for example from one finger, palm or stylus. Multipoint gestures are gestures that can be performed with multiple points. For example, this gesture is performed with multiple touches, for example from multiple fingers, fingers and palms, fingers and stylus, multiple stylus and / or any combination thereof. Static gestures are gestures that do not include movement, and dynamic gestures are gestures that do include movement. Continuous gestures are gestures performed in a single stroke, and distinct gestures are gestures performed in a sequence of separate steps or strokes.

손가락과 터치 스크린의 접촉은 통상적으로 여러 상이한 패턴을 갖는다. 예를 들어, 터치 스크린 상에서의 단일점 제스처는 다운 이벤트(down event) 및 그에 뒤이은 다운 이벤트와 동일한 위치 또는 거의 동일한 위치에서의 업 이벤트(up event)를 포함한다. 터치 스크린 상에서의 동적 제스처는 다운 이벤트와 그에 뒤이은 적어도 하나의 드래깅 이벤트(dragging event), 그리고 그 다음에 오는 업 이벤트를 포함한다.The contact of a finger with the touch screen typically has several different patterns. For example, a single point gesture on a touch screen includes a down event followed by an up event at or about the same location as the down event. Dynamic gestures on the touch screen include a down event followed by at least one dragging event, followed by an up event.

일부 실시예들에서, 손가락이 터치 스크린 디스플레이에 접근하고, 터치 스크린 디스플레이와 접촉하며, 터치 스크린 디스플레이로부터 멀어져가는 프로세스를 기술하기 위해 파라미터가 사용된다. 여기서 터치 스크린 디스플레이는 투명 디스플레이와 일체로 된 터치 스크린일 수 있다. 이 파라미터는 손가락과 터치 스크린 디스플레이 간의 거리, 손가락이 터치 스크린 디스플레이를 누르는 압력, 손가락과 터치 스크린 간의 접촉 면적, 손가락과 터치 스크린 간의 전압, 손가락과 터치 스크린 디스플레이 간의 커패시턴스, 또는 물리 파라미터들 중 적어도 하나의 함수일 수 있다.In some embodiments, parameters are used to describe the process by which a finger approaches a touch screen display, contacts a touch screen display, and moves away from the touch screen display. The touch screen display may be a touch screen integrated with the transparent display. This parameter may be at least one of the distance between the finger and the touch screen display, the pressure at which the finger presses the touch screen display, the contact area between the finger and the touch screen, the voltage between the finger and the touch screen, the capacitance between the finger and the touch screen display, or at least one of the physical parameters. It may be a function of.

일부 실시예들에서, 손가락과 터치 스크린 디스플레이 간의 파라미터(예를 들어, 커패시턴스)의 크기에 따라, 이 파라미터가 미리 정해진 문턱값을 넘을 때, 다운 이벤트가 일어나고, 이 파라미터가 미리 정해진 문턱값을 넘고 있는 동안에 손가락의 대응하는 커서 위치가 위치 A로부터 위치 B로 이동할 때, 드래깅 이벤트가 일어나며, 이 파라미터가 문턱값 레벨 아래로 떨어질 때 업 이벤트가 일어난다.In some embodiments, depending on the magnitude of a parameter (eg, capacitance) between the finger and the touch screen display, when this parameter exceeds a predetermined threshold, a down event occurs and the parameter exceeds the predetermined threshold and While the finger's corresponding cursor position moves from position A to position B, a dragging event occurs, and an up event occurs when this parameter falls below the threshold level.

투명 디스플레이 장치(100)는 터치 스크린 디스플레이(300) 상의 제1 위치(310)에서 다운 이벤트를 검출한다. 손가락(301)은 제1 위치(310)에서 제2 위치(320)로 이동한다. 이때 손가락(301)은 투명 디스플레이 장치(100)의 터치 스크린 디스플레이(300)에 접촉된 상태로 이동할 수 있고, 손가락(301)과 터치 스크린 디스플레이(300) 간의 파라미터가 소정의 문턱값을 넘는 상태로 이동할 수 있다. 그리고 투명 디스플레이 장치(100)는 제2 위치(320)에서 드래깅 이벤트를 검출하면, 투명 디스플레이 장치(100)는 제1 위치(310) 및 제2 위치(320)를 포함하는 영역을 지시하는 표시(321)를 터치 스크린 디스플레이(300)에 디스플레이할 수 있다.The transparent display device 100 detects a down event at the first location 310 on the touch screen display 300. Finger 301 moves from first position 310 to second position 320. In this case, the finger 301 may move in contact with the touch screen display 300 of the transparent display device 100, and the parameter between the finger 301 and the touch screen display 300 exceeds a predetermined threshold. I can move it. When the transparent display device 100 detects a dragging event at the second location 320, the transparent display device 100 displays a display indicating an area including the first location 310 and the second location 320. 321 may be displayed on the touch screen display 300.

손가락(301)은 제3 위치(330)로 이동하고, 손가락이 터치 스크린 디스플레이(300)로부터 떨어지거나 파라미터가 소정의 문턱값보다 작아지면, 투명 디스플레이 장치(100)는 제3 위치(330)에서 업 이벤트를 검출한다. 업 이벤트를 검출하면, 투명 디스플레이 장치(100)는 제1 위치(310) 및 제3 위치(330)를 포함하는 영역을 지시하는 표시(331)를 디스플레이하고 표시된 영역에서 터치 스크린 디스플레이(300)를 통해 보이는 배경을 선택할 수 있다. 여기서 제1 위치(310)의 다운 이벤트 및 제3 위치(330)의 업 이벤트가 하나의 지역 선택 정보로 인식될 수 있고, 입력된 지역 선택 정보가 지시하는 영역은 제1 위치(310) 및 제3 위치(330)를 포함하는 영역일 수 있다. 또한 지역 선택 정보로 선택된 영역(331)은 이하 클롭영역으로 명명될 수 있고, 투명 디스플레이 장치(100)는 클롭영역을 통해 보이는 배경의 일부 영역을 선택할 수 있다.When the finger 301 moves to the third position 330 and the finger is moved away from the touch screen display 300 or the parameter is smaller than a predetermined threshold, the transparent display device 100 is moved to the third position 330. Detect up event. Upon detecting the up event, the transparent display apparatus 100 displays a display 331 indicating an area including the first location 310 and the third location 330 and displays the touch screen display 300 in the displayed area. You can choose the background you see. Here, the down event of the first location 310 and the up event of the third location 330 may be recognized as one area selection information, and the area indicated by the input area selection information may be the first location 310 and the first location. It may be an area including the three positions 330. In addition, the region 331 selected as the region selection information may be referred to as a region below, and the transparent display device 100 may select a portion of the background visible through the region.

도 4는 배경의 일부 영역이 촬상된 이미지를 디스플레이한 화면의 일예를 도시한 도면이다.4 is a diagram illustrating an example of a screen displaying an image in which a part of a background is photographed.

도 4를 참조하면, 투명 디스플레이 장치(100)는 배경의 일부 영역이 촬상된 이미지(400)를 디스플레이할 수 있다. 또한 투명 디스플레이 장치(100)는 촬상된 배경의 지역에 대한 위치 정보(410)를 화면(400)에 더 디스플레이할 수 있다.Referring to FIG. 4, the transparent display apparatus 100 may display an image 400 in which a partial region of the background is photographed. In addition, the transparent display apparatus 100 may further display location information 410 about the area of the photographed background on the screen 400.

투명 디스플레이 장치(100)는 촬상한 지역의 위치 정보를 위치 응용 서버(20)로부터 획득할 수 있고, 자신의 위치 정보로부터 촬상한 지역의 위치 정보를 산출할 수 있다.The transparent display apparatus 100 may obtain location information of the photographed area from the location application server 20, and calculate location information of the photographed area from its location information.

투명 디스플레이 장치(100)는 Cell ID 방식, AOA 방식 및 TDOA 방식 등의 네트워크 기반(Network-based) 기술을 이용하여 기지국(40)으로부터 수신된 전파를 통해 자신의 위치를 측위할 수 있다. 또한 투명 디스플레이 장치(100)는 TOA(Time Of Arrivals) 방식, GPS(Global Positioning System) 방식 및 Hybrid 측위 방식 등의 Handset-based 측위 기술을 이용하여 위성(30)로부터 수신된 신호를 통해 자신의 위치를 측위할 수 있다.The transparent display apparatus 100 may position its position through radio waves received from the base station 40 using network-based technologies such as Cell ID scheme, AOA scheme, and TDOA scheme. In addition, the transparent display apparatus 100 uses a handset-based positioning technique such as a time of arrival (TOA) method, a global positioning system (GPS) method, and a hybrid positioning method, to position itself through a signal received from the satellite 30. Can be located.

투명 디스플레이 장치(100)를 중심으로 촬상한 지역의 위치는 영상인식 기반 기술을 이용하여 측위할 수 있다. 투명 디스플레이 장치(100)는 교사학습 알고리즘을 이용하여 다수의 촬영 장치로부터 촬영된 지역이 포함된 사진으로부터 지역의 위치를 측위할 수 있다. 또한 투명 디스플레이 장치(100)는 Vision VR 기반 기술을 이용하여 지역의 위치를 측위할 수 있다. 지역의 위치를 측위하기 위해 영상인식 기반을 기술을 이용하면 수 cm내의 정밀도로 지역의 위치를 탐지할 수 있어, 보다 정확하게 지역의 위치를 탐지할 수 있다.The location of the region captured by the transparent display apparatus 100 may be positioned by using image recognition based technology. The transparent display apparatus 100 may use the teacher learning algorithm to position the region from a photograph including the region photographed by the plurality of photographing apparatuses. In addition, the transparent display apparatus 100 may position a region using Vision VR based technology. Using image recognition based technology to locate the location of the area, the location of the area can be detected with a precision of several centimeters, which makes it possible to more accurately detect the location of the area.

투명 디스플레이 장치(100)를 중심으로 촬상한 지역의 위치는 초음파 기반 기술을 이용하여 측위할 수 있다. 투명 디스플레이 장치(100)는 지역을 촬상한 방향으로 초음파를 전송하여 전송된 초음파를 통해 탐지된 지역의 거리를 산출할 수 있고, 초음파가 전송된 방향을 통해 지역의 방위각을 결정할 수 있다. 그리고 투명 디스플레이 장치(100)는 산출된 거리 및 결정된 방위각을 기초로 촬상한 지역의 위치를 측위할 수 있다.The location of the region captured by the transparent display apparatus 100 may be positioned by using an ultrasound-based technology. The transparent display apparatus 100 may calculate the distance of the detected area through the transmitted ultrasound by transmitting ultrasound in the direction of imaging the area, and determine the azimuth angle of the area through the direction in which the ultrasound is transmitted. In addition, the transparent display apparatus 100 may position the location of the photographed area based on the calculated distance and the determined azimuth angle.

투명 디스플레이 장치(100)는 지역 상세 표시 메뉴(420) 및 연결 표시 메뉴(430) 중 적어도 하나를 화면(400)에 더 디스플레이할 수 있다.The transparent display apparatus 100 may further display at least one of the region detail display menu 420 and the connection display menu 430 on the screen 400.

도 5는 배경의 일부 영역에 대한 지도를 디스플레이한 화면의 일예를 도시한 도면이다.5 is a diagram illustrating an example of a screen displaying a map of a partial region of a background.

도 5를 참조하면, 화면(400)에서 사용자가 지역 상세 표시 메뉴(420)를 선택하면, 투명 디스플레이 장치(100)는 촬상한 지역의 지도(500)를 디스플레이할 수 있다. 또한 투명 디스플레이 장치(100)는 지점 정보를 표시하기 위한 정보 표시 객체(510, 520, 530, 540)를 화면(500)에 더 디스플레이할 수 있다.Referring to FIG. 5, when the user selects the region detail display menu 420 on the screen 400, the transparent display device 100 may display a map 500 of the photographed region. In addition, the transparent display apparatus 100 may further display the information display objects 510, 520, 530, and 540 for displaying the point information on the screen 500.

정보 표시 객체(510, 520, 530, 540)는 각각 표시할 지점 정보와 연관된 지점에 위치할 수 있다. 정보 표시 객체(510)는 DDD Mart와 연관된 지점 정보를 표시하기 위한 것으로 DDD Mart가 지도(500)에 위치한 위치에 위치할 수 있다. 또한 정보 표시 객체(520)는 AAA Restaurant를 연관된 지점 정보를 표시하기 위한 것으로 AAA Restaurant가 지도(500)에 위치한 위치에 위치할 수 있다. 또한 정보 표시 객체(530)는 BBB Car Repair Shop과 연관된 지점 정보를 표시하기 위한 것으로 BBB Car Repair Shop이 지도(500)에 위치한 위치에 위치할 수 있다. 그리고 정보 표시 객체(540)는 CCC Barber Shop과 연관된 지점 정보를 표시하기 위한 것으로 CCC Barber Shop이 지도(500)에 위치한 위치에 위치할 수 있다.The information display objects 510, 520, 530, and 540 may be located at points associated with point information to be displayed, respectively. The information display object 510 is for displaying point information associated with the DDD Mart and may be located at a location where the DDD Mart is located on the map 500. In addition, the information display object 520 is for displaying the point information associated with the AAA Restaurant may be located at the location where the AAA Restaurant is located on the map 500. In addition, the information display object 530 is for displaying point information associated with the BBB Car Repair Shop and may be located at a location where the BBB Car Repair Shop is located on the map 500. The information display object 540 is for displaying point information associated with the CCC Barber Shop and may be located at a location where the CCC Barber Shop is located on the map 500.

도 6은 도 5의 지도를 배경으로 지점 정보를 디스플레이한 화면의 일예를 도시한 도면이다.FIG. 6 is a diagram illustrating an example of a screen displaying point information in a background of the map of FIG. 5.

도 6을 참조하면, 정보 표시 객체(510, 520, 530, 540)가 위치하는 영역 내에서 다운 이벤트가 발생하면, 투명 디스플레이 장치(100)는 다운 이벤트가 발생된 위치에 위치하는 정보 표시 객체와 연관된 지점 정보를 표시할 수 있다. 여기서 지점 정보는 해당 지점의 연락처, 지점의 종류 및 지점 소개 정보 중 적어도 하나를 포함할 수 있다.Referring to FIG. 6, when a down event occurs in an area where the information display objects 510, 520, 530, and 540 are located, the transparent display apparatus 100 may include an information display object located at a location where the down event occurs. Associated point information can be displayed. The branch information may include at least one of a contact point of a corresponding branch, the type of branch, and branch introduction information.

화면(500)에서 정보 표시 객체(520)가 위치하는 영역 내에서 다운 이벤트가 발생하면, 투명 디스플레이 장치(100)는 정보 표시 객체(520)와 연관된 지점 정보(610)를 화면(600)에 디스플레이할 수 있다.When the down event occurs in the area where the information display object 520 is located on the screen 500, the transparent display device 100 displays the point information 610 associated with the information display object 520 on the screen 600. can do.

도 7은 배경의 일부 영역에 대한 지도를 디스플레이한 화면의 다른 예를 도시한 도면이다.7 is a diagram illustrating another example of a screen displaying a map of a partial region of a background.

도 7을 참조하면, 화면(400)에서 사용자가 연결 표시 메뉴(430)를 선택하면, 투명 디스플레이 장치(100)는 촬상한 지역의 지도(700)를 디스플레이할 수 있다. 또한 투명 디스플레이 장치(100)는 지점 정보를 표시하기 위한 연결 객체(710, 720, 730)를 화면(700)에 더 디스플레이할 수 있다. 여기서 연결 객체(710, 720, 730)는 특정 사람을 지시하며, 지시하는 사람과의 전화연결을 위한 버튼(711, 721, 731) 및 지시하는 사람에게 문자 전송을 위한 버튼(712, 722, 732)을 포함할 수 있다. 또한 연결 객체(710, 720, 730)는 지시하는 사람에 대한 사진(713, 723, 733)을 더 포함할 수 있다.Referring to FIG. 7, when the user selects the connection display menu 430 on the screen 400, the transparent display device 100 may display a map 700 of the photographed area. In addition, the transparent display apparatus 100 may further display the connection objects 710, 720, and 730 for displaying point information on the screen 700. Herein, the connection objects 710, 720, and 730 indicate a specific person, buttons 711, 721, and 731 for telephone connection with the person instructing, and buttons 712, 722, 732 for text transmission to the person instructing. ) May be included. In addition, the connection objects 710, 720, and 730 may further include photographs 713, 723, and 733 of the indicating person.

사용자가 버튼(711, 721, 731)을 클릭하면, 투명 디스플레이 장치(100)는 연결 객체가 지시하는 사람의 전화번호로 전화연결을 요청하는 신호를 전송할 수 있다. 또한 사용자가 버튼(712, 722, 732)을 클릭하면, 투명 디스플레이 장치(100)는 연결 객체가 지시하는 사람의 전화번호로 문자를 포함하는 신호를 전송할 수 있다.When the user clicks the buttons 711, 721, and 731, the transparent display apparatus 100 may transmit a signal for requesting a telephone connection to the phone number of the person indicated by the connection object. In addition, when the user clicks the buttons 712, 722, and 732, the transparent display apparatus 100 may transmit a signal including a text to the phone number of the person indicated by the connection object.

연결 객체(710, 720, 730)는 각각 지시하는 사람이 위치하는 지점에 위치할 수 있다. So-Yul를 지시하는 연결 객체(710)는 So-Yol이 지도(700)상에 위치하는 지점에 위치할 수 있고, Vakki를 지시하는 연결 객체(720)는 Vakki가 지도(700)상에 위치하는 지점에 위치할 수 있으며, JooJoo가 지시하는 연결 객체(730)는 JooJoo가 지도(700)상에 위치하는 지점에 위치할 수 있다. 여기서 특정인이 위치하는 지점의 위치 정보는 위치 응용 서버(20)로부터 수신 받을 수 있다.The connection objects 710, 720, and 730 may be located at points where the indicating person is located. The connection object 710 indicating So-Yul may be located at the point where So-Yol is located on the map 700, and the connection object 720 indicating Vakki is located on the map 700. The connection object 730 indicated by JooJoo may be located at the point where JooJoo is located on the map 700. Here, the location information of the point where the specific person is located may be received from the location application server 20.

도 8은 본 발명에 따른 투명 디스플레이 장치에 대한 바람직한 일실시예의 구성을 도시한 블록도이다. 8 is a block diagram showing the configuration of a preferred embodiment of a transparent display device according to the present invention.

도 8을 참조하면, 투명 디스플레이 장치(100)는 튜너부(110), 복조부(120), 네트워크 인터페이스부(130), 신호 처리부(140), 투명 디스플레이(150), 음성 출력부(160), 입력장치(170), 저장부(180), 제어부(190) 및 외부 신호 수신부(135)를 포함한다. 투명 디스플레이 장치(100)는 데스크톱, 랩톱, 태블릿 또는 핸드헬드 컴퓨터 등의 퍼스널 컴퓨터 시스템일 수 있다. 또한 투명 디스플레이 장치(100)는 휴대폰, 스마트폰(smart phone), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이션 등과 같은 이동 단말기일 수 있고, 디지털 TV 같은 고정형 가전기기일 수 있다.Referring to FIG. 8, the transparent display apparatus 100 includes a tuner unit 110, a demodulator 120, a network interface unit 130, a signal processor 140, a transparent display 150, and an audio output unit 160. , An input device 170, a storage unit 180, a controller 190, and an external signal receiver 135. The transparent display device 100 may be a personal computer system such as a desktop, laptop, tablet or handheld computer. In addition, the transparent display device 100 may be a mobile terminal such as a mobile phone, a smart phone, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), a navigation device, or the like. Can be.

튜너부(110)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환한다. 예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)로 변환한다. 즉, 튜너부(110)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. 튜너부(110)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)는 신호처리부(140)로 직접 입력될 수 있다.The tuner unit 110 selects an RF broadcast signal corresponding to a channel selected by a user from among radio frequency (RF) broadcast signals received through an antenna, and converts the selected RF broadcast signal into an intermediate frequency signal or a baseband video or audio signal. To convert. For example, if the selected RF broadcast signal is a digital broadcast signal, it is converted into a digital IF signal (DIF). If the analog broadcast signal is converted into an analog baseband video or audio signal (CVBS SIF). That is, the tuner 110 may process a digital broadcast signal or an analog broadcast signal. The analog baseband video or audio signal CVBS SIF output from the tuner 110 may be directly input to the signal processor 140.

또한, 튜너부(110)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다. In addition, the tuner unit 110 may receive a single broadcast RF broadcast signal according to an ATSC (Advanced Television System Committee) scheme or a multiple broadcast RF broadcast signal according to a digital video broadcasting (DVB) scheme.

본 발명의 또 다른 실시예에 의하면, 투명 디스플레이 장치(100)는 적어도 2개의 튜너부를 구비할 수 있다. 적어도 2개의 튜너부를 구비하는 경우, 제2 튜너부는 제1 튜너부와 유사하게 안테나를 통해 수신되는 RF 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환한다.According to another embodiment of the present invention, the transparent display device 100 may include at least two tuner parts. In the case of having at least two tuner units, the second tuner unit selects an RF broadcast signal corresponding to a channel selected by a user from among RF broadcast signals received through an antenna, similarly to the first tuner unit, and intermediates the selected RF broadcast signal. Convert to frequency signal or baseband video or audio signal.

또한, 제2 튜너부는 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다. 제2 튜너부는 주기적으로 모든 방송 채널의 변환 작업을 수행할 수 있다. 따라서 투명 디스플레이 장치(100)는 제1 튜너부를 통하여 변환된 방송 신호의 영상을 표시하면서, 제2 튜너부를 통하여 변환된 여러 채널의 영상을 썸 네일 형태로 제공할 수 있다. 이 경우, 제1 튜너부는 사용자가 선택한 메인 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환하고, 제2 튜너부는 메인 RF 방송 신호를 제외한 모든 RF 방송 신호를 순차적/주기적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.In addition, the second tuner may sequentially select the RF broadcast signals of all the broadcast channels stored through the channel memory function among the received RF broadcast signals and convert them to intermediate frequency signals or baseband video or audio signals. The second tuner may periodically perform the conversion of all broadcast channels. Therefore, the transparent display device 100 may display images of the broadcast signal converted through the first tuner unit and provide images of various channels converted through the second tuner unit in the form of thumbnails. In this case, the first tuner unit converts the main RF broadcast signal selected by the user into an intermediate frequency signal or a baseband video or audio signal, and the second tuner unit sequentially / periodically selects all the RF broadcast signals except for the main RF broadcast signal. This may be converted into an intermediate frequency signal or a baseband video or audio signal.

복조부(120)는 튜너부(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 일예로, 튜너부(110)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(120)는 8-VSB(11-Vestigial Side Band) 복조를 수행한다. 또 다른 예로, 튜너부(110)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(120)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다.The demodulator 120 receives the digital IF signal DIF converted by the tuner 110 and performs a demodulation operation. For example, when the digital IF signal output from the tuner unit 110 is an ATSC scheme, the demodulator 120 performs 11-VSGI (11-Vestigial Side Band) demodulation. As another example, when the digital IF signal output from the tuner 110 is a DVB scheme, the demodulator 120 performs coded orthogonal frequency division modulation (COFDMA) demodulation.

또한, 복조부(120)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(120)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.Also, the demodulation unit 120 may perform channel decoding. To this end, the demodulator 120 includes a trellis decoder, a de-interleaver, and a reed solomon decoder to perform trellis decoding, deinterleaving, Solomon decoding can be performed.

복조부(120)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일 수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.The demodulation unit 120 may perform demodulation and channel decoding, and then output a stream signal TS. In this case, the stream signal may be a signal multiplexed with a video signal, an audio signal, or a data signal. For example, the stream signal may be an MPEG-2 Transport Stream (TS) multiplexed with an MPEG-2 standard video signal, a Dolby AC-3 standard audio signal, and the like. Specifically, the MPEG-2 TS may include a header of 4 bytes and a payload of 184 bytes.

복조부(120)에서 출력한 스트림 신호는 신호처리부(140)로 입력될 수 있다. 신호처리부(140)는 역다중화 및 신호 처리 등을 수행한 후, 투명 디스플레이(150)에 영상을 출력하고, 음성 출력부(160)로 음성을 출력한다. The stream signal output from the demodulator 120 may be input to the signal processor 140. The signal processor 140 performs demultiplexing and signal processing, and then outputs an image to the transparent display 150, and outputs an audio to the audio output unit 160.

또한, 적어도 2개의 튜너부가 구비된 디지털 방송 수신기의 경우, 그에 대응하는 수의 복조부를 구비할 수 있다. 또한 복조부는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비될 수 있다.In addition, in the case of a digital broadcast receiver having at least two tuners, a number of demodulators corresponding thereto may be provided. The demodulator may be provided separately according to the ATSC scheme and the DVB scheme.

네트워크 인터페이스부(130)는 네트워크로부터 수신되는 패킷(packet)들을 수신하고, 네트워크로 패킷을 전송한다. 네트워크 인터페이스부(130)는 네트워크를 통해 지역 정보 제공 서버(10)로부터 지역 정보를 전달하는 IP 패킷을 수신할 수 있고, 위치 응용 서버(20)로부터 위치 정보를 전달하는 IP 패킷을 수신할 수 있다.The network interface unit 130 receives the packets received from the network and transmits the packets to the network. The network interface unit 130 may receive an IP packet for delivering location information from the location information providing server 10 through a network, and may receive an IP packet for delivering location information from the location application server 20. .

또한 네트워크 인터페이스부(130)는 네트워크를 통해 서비스 제공 서버로부터 방송 데이터를 전달하는 IP 패킷을 수신한다. 여기서 방송 데이터는 컨텐츠, 컨텐츠 업데이트 여부를 알리는 업데이트 메시지, 메타데이터, 서비스 정보, 소프트웨어 코드 및 A/V 데이터를 포함한다. 또한 서비스 정보는 실시간 방송 서비스에 대한 서비스 정보 및 인터넷 서비스에 대한 서비스 정보를 포함할 수 있다. 여기서 인터넷 서비스는 CoD(Content's on Demand) 서비스, 유튜브 서비스, 날씨, 뉴스, 지역 정보 및 검색 등의 인포메이션 서비스, 게임, 노래방 등의 엔터테인먼트 서비스, TV 메일, TV SMS(Short Message Service) 등의 커뮤니케이션 서비스 등 인터넷을 통해 제공될 수 있는 서비스를 의미한다. 이에 따라 본 발명에서 디지털 방송 수신기는 네트워크 TV, 웹 TV 및 브로드밴드 TV를 포함한다. 또한 방송 서비스는 지상파, 위성 및 케이블을 통해 제공되는 방송 서비스뿐만 아니라 인터넷 서비스를 포함할 수 있다.In addition, the network interface unit 130 receives an IP packet for transmitting broadcast data from a service providing server through a network. Here, the broadcast data includes content, update messages indicating whether to update the content, metadata, service information, software code, and A / V data. In addition, the service information may include service information for the real-time broadcast service and service information for the Internet service. The Internet service includes content services such as CoD (Content's on Demand), YouTube service, weather, news, local information and search, entertainment services such as games and karaoke, TV mail, and TV SMS (Short Message Service). This means a service that can be provided through the Internet. Accordingly, in the present invention, the digital broadcast receiver includes a network TV, a web TV and a broadband TV. In addition, the broadcast service may include an internet service as well as a broadcast service provided through terrestrial, satellite, and cable.

제어부(190)는 명령어를 실행하고 투명 디스플레이 장치(100)와 연관된 동작을 수행한다. 예를 들면, 저장부(180)로부터 검색된 명령어를 사용하여, 제어부(190)는 투명 디스플레이 장치(100)의 컴포넌트들 간의 입력 및 출력, 데이터의 수신 및 처리를 제어할 수 있다. 제어부(190)는 단일 칩, 다수의 칩, 또는 다수의 전기 부품 상에 구현될 수 있다. 예를 들어, 전용 또는 임베디드 프로세서, 단일 목적 프로세서, 컨트롤러, ASIC, 기타 등등을 비롯하여 여러 가지 아키텍처가 제어부(190)에 대해 사용될 수 있다.The controller 190 executes a command and performs an operation associated with the transparent display apparatus 100. For example, the controller 190 may control input and output and reception and processing of data between components of the transparent display apparatus 100 by using a command retrieved from the storage unit 180. The controller 190 may be implemented on a single chip, multiple chips, or multiple electrical components. For example, various architectures may be used for the controller 190, including dedicated or embedded processors, single purpose processors, controllers, ASICs, and the like.

제어부(190)는 운영 체제와 함께 컴퓨터 코드를 실행하고 데이터를 생성 및 사용하는 동작을 한다. 운영 체제는 일반적으로 공지되어 있으며 이에 대해 보다 상세히 기술하지 않는다. 예로서, 운영 체제는 Window 계열 OS, Unix, Linux, Palm OS, DOS, 안드로이드 및 매킨토시 등일 수 있다. 운영 체제, 다른 컴퓨터 코드 및 데이터는 제어부(190)와 연결되어 동작하는 저장부(180) 내에 존재할 수 있다.The controller 190 executes computer code together with an operating system to generate and use data. The operating system is generally known and will not be described in more detail. By way of example, the operating system may be a Window based OS, Unix, Linux, Palm OS, DOS, Android, Macintosh, and the like. The operating system, other computer code, and data may be present in the storage unit 180 that operates in conjunction with the control unit 190.

저장부(180)는 일반적으로 투명 디스플레이 장치(100)에 의해 사용되는 프로그램 코드 및 데이터를 저장하는 장소를 제공한다. 예로서, 저장부(180)는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 하드 디스크 드라이브 등으로 구현될 수 있다. 프로그램 코드 및 데이터는 분리형 저장 매체에 존재할 수 있고, 필요할 때, 투명 디스플레이 장치(100) 상으로 로드 또는 설치될 수 있다. 여기서 분리형 저장 매체는 CD-ROM, PC-CARD, 메모리 카드, 플로피 디스크, 자기 테이프, 및 네트워크 컴포넌트를 포함한다.The storage unit 180 generally provides a place for storing program codes and data used by the transparent display apparatus 100. For example, the storage unit 180 may be implemented as a read only memory (ROM), a random access memory (RAM), a hard disk drive, or the like. The program code and data may reside in a removable storage medium and may be loaded or installed onto the transparent display device 100 as needed. Removable storage media herein include CD-ROMs, PC-CARDs, memory cards, floppy disks, magnetic tape, and network components.

투명 디스플레이(150)는 제어부(190)와 연결되어 동작할 수 있다. 투명 디스플레이(150)는 유기 발광 패널이나 플라즈마 패널로 구현될 수 있다.The transparent display 150 may operate in connection with the controller 190. The transparent display 150 may be implemented as an organic light emitting panel or a plasma panel.

투명 디스플레이(150)는 투명 디스플레이 장치의 사용자와 운영 체제 또는 운영 체제 상에서 실행 중인 애플리케이션 간의 사용하기 쉬운 인터페이스를 제공하는 그래픽 사용자 인터페이스(GUI)(153)를 디스플레이할 수 있다. GUI(153)는 프로그램, 파일, 및 동작 옵션들을 그래픽 이미지로 표현한다. 그래픽 이미지는 윈도우, 필드, 대화상자, 메뉴, 아이콘, 버튼, 커서 및 스크롤바 등을 포함할 수 있다. 이러한 이미지는 미리 정의된 레이아웃으로 정렬될 수 있거나, 사용자가 취하고 있는 특정의 조치를 돕기 위해 동적으로 생성될 수 있다. 동작 동안에, 사용자는 여러 가지 그래픽 이미지와 연관된 기능 및 작업을 제기하기 위해 그 이미지를 선택 및 활성화할 수 있다. 예로서, 사용자는 윈도우의 열기, 닫기, 최소화, 또는 최대화를 행하는 버튼, 또는 특정 프로그램을 가동시키는 아이콘을 선택할 수 있다.The transparent display 150 may display a graphical user interface (GUI) 153 that provides an easy-to-use interface between a user of the transparent display device and an operating system or an application running on the operating system. The GUI 153 presents the program, file, and operation options in a graphical image. A graphical image may include a window, a field, a dialog box, a menu, an icon, a button, a cursor, a scroll bar, and the like. Such images may be arranged in a predefined layout or may be dynamically generated to help with the particular action the user is taking. During operation, a user can select and activate an image to present functions and tasks associated with various graphical images. By way of example, a user may select a button that opens, closes, minimizes, or maximizes a window, or an icon that launches a particular program.

입력장치(170)는 투명 디스플레이(150) 상에 또는 그 전방에 배치되어 있는 터치 스크린일 수 있다. 터치 스크린은 투명 디스플레이(150)와 일체로 되어 있거나 별개의 구성요소일 수 있다. 터치 스크린이 투명 디스플레이(150)의 전방에 배치됨에 따라 사용자는 GUI(153)를 직접 조작할 수 있다. 예를 들어, 사용자는 단지 제어될 객체 상에 그의 손가락을 올려 놓을 수 있다. 터치패드에서는, 이것과 같은 일대일 관계가 없다.The input device 170 may be a touch screen disposed on or in front of the transparent display 150. The touch screen may be integrated with the transparent display 150 or may be a separate component. As the touch screen is disposed in front of the transparent display 150, the user may directly manipulate the GUI 153. For example, the user may only place his finger on the object to be controlled. In the touchpad, there is no one-to-one relationship like this.

터치패드에 있어서, 터치패드는 투명 디스플레이(150)로부터 떨어져 일반적으로 다른 평면에 놓여 있다. 예를 들어, 투명 디스플레이(150)는 일반적으로 수직 평면에 위치해 있고, 터치패드는 일반적으로 수평 평면에 위치해 있다. 이것은 그의 사용을 덜 직관적이게 하며, 따라서 터치 스크린과 비교할 때 더 어렵다. 터치 스크린인 것에 부가하여, 입력장치(170)는 다중점 입력장치일 수 있다.In the touchpad, the touchpad lies generally in a different plane away from the transparent display 150. For example, the transparent display 150 is generally located in a vertical plane and the touchpad is generally located in a horizontal plane. This makes its use less intuitive and therefore more difficult when compared to a touch screen. In addition to being a touch screen, the input device 170 may be a multipoint input device.

제어부(190)는 입력장치(170)에 가해지는 제스처(171)를 인식하고 이 제스처(171)에 기초하여 투명 디스플레이 장치(100)를 제어할 수 있다. 여기서, 제스처는 하나 이상의 특정의 컴퓨팅 동작에 매핑되는, 입력장치(170)와의 양식화된 상호작용으로서 정의될 수 있다. 제스처(171)는 여러 가지 손을 통해, 보다 상세하게는 손가락 움직임을 통해 행해질 수 있다. 다른 대안으로서 또는 그에 부가하여, 제스처는 스타일러스로 행해질 수 있다.The controller 190 may recognize the gesture 171 applied to the input device 170 and control the transparent display device 100 based on the gesture 171. Here, the gesture may be defined as a stylized interaction with the input device 170 that maps to one or more specific computing operations. The gesture 171 may be performed through various hands, and more specifically, through finger movements. As another alternative or in addition, the gesture may be done with a stylus.

입력장치(170)는 제스처(171)를 수신하고, 제어부(190)는 제스처(171)와 연관된 동작들을 수행하는 명령어들을 실행한다. 게다가, 저장부(180)는 운영 체제 또는 별도의 애플리케이션의 일부일 수 있는 제스처 작동 프로그램(181)을 포함할 수 있다. 제스처 작동 프로그램(181)은 일반적으로 제스처(171)의 발생을 인식하고 그 제스처(171) 및/또는 제스처(171)에 응답하여 무슨 조치(들)이 취해져야 하는지를 하나 이상의 소프트웨어 에이전트에게 알려주는 일련의 명령어를 포함한다.The input device 170 receives the gesture 171, and the controller 190 executes commands for performing operations associated with the gesture 171. In addition, the storage unit 180 may include a gesture operating program 181 which may be part of an operating system or a separate application. Gesture operator 181 generally recognizes the occurrence of gesture 171 and in turn responds to gesture 171 and / or gesture 171 to inform one or more software agents of what action (s) should be taken. Contains the command of.

사용자가 하나 이상의 제스처를 행할 때, 입력장치(170)는 제스처 정보를 제어부(190)로 전달한다. 저장부(180)로부터의 명령어, 보다 상세하게는 제스처 작동 프로그램(181)을 사용하여, 제어부(190)는 제스처(171)를 해석하고 저장부(180), 투명 디스플레이(150), 음성 출력부(160), 신호 처리부(140), 네트워크 인터페이스부(130) 및 입력장치(170) 등의 투명 디스플레이 장치(100)의 서로 다른 컴포넌트를 제어한다. 제스처(171)는 저장부(180)에 저장된 애플리케이션에서의 동작을 수행하고, 투명 디스플레이(150) 상에 나타난 GUI 객체를 수정하며, 저장부(180)에 저장된 데이터를 수정하고, 네트워크 인터페이스부(130), 신호 처리부(140)에서의 동작을 수행하는 명령으로서 식별될 수 있다. 예로서, 이들 명령은 줌잉, 패닝, 스크롤링, 페이지 넘김, 회전, 크기조정, 영상 채널 변경, 컨텐츠 수신, 인터넷 접속 등과 연관되어 있을 수 있다. 추가의 예로서, 명령은 또한 특정의 프로그램을 기동시키는 것, 파일 또는 문서를 여는 것, 메뉴를 보는 것, 선택을 하는 것, 명령어를 실행하는 것, 인터넷 사이트 시스템에 로그온하는 것, 인가된 개인에게 컴퓨터 시스템의 제한된 영역에의 액세스를 허용하는 것, 바탕화면의 사용자 선호 배열과 연관된 사용자 프로파일을 로드하는 것, 및/또는 기타 등등과 연관되어 있을 수 있다.When the user performs one or more gestures, the input device 170 transmits gesture information to the controller 190. Using commands from the storage unit 180, more specifically the gesture operation program 181, the controller 190 interprets the gesture 171 and stores the storage unit 180, the transparent display 150, and the voice output unit. Different components of the transparent display device 100 such as the 160, the signal processor 140, the network interface 130, and the input device 170 are controlled. The gesture 171 performs an operation in an application stored in the storage unit 180, modifies a GUI object displayed on the transparent display 150, modifies data stored in the storage unit 180, and a network interface unit ( 130 may be identified as a command for performing an operation in the signal processor 140. By way of example, these commands may be associated with zooming, panning, scrolling, page turning, rotation, resizing, video channel change, content reception, Internet connection, and the like. As a further example, the command may also be used to launch a particular program, open a file or document, view a menu, make a selection, execute a command, log on to an Internet site system, authorized person Permitting access to restricted areas of the computer system, loading a user profile associated with a user's preferred array of desktops, and / or the like.

제어부(190)는 입력장치(170)로부터 수신된 지역 선택 정보를 기초로 투명 디스플레이(150)를 통해 보이는 배경의 일부 영역을 선택할 수 있다. 만일 지역 선택 정보가 다운 이벤트 및 업 이벤트인 경우에는, 제어부(190)는 다운 이벤트 발생한 제1 위치 및 업 이벤트가 발생한 제2 위치를 포함하는 영역이 클롭영역으로 선택된 것으로 인식하고, 선택된 클롭영역에서 보이는 배경을 선택할 수 있다. 여기서 제어부(190)는 촬영 장치(90)로부터 수신되는 사진을 통해 투명 디스플레이로 향하는 사람의 시선 방향을 인식하고, 인식한 시선 방향에서 클롭영역 통해 보이는 배경을 선택할 수 있다. The controller 190 may select a partial region of the background visible through the transparent display 150 based on the region selection information received from the input apparatus 170. If the region selection information is a down event and an up event, the controller 190 recognizes that an area including a first location where a down event occurs and a second location where an up event occurs is selected as a clob area, and then selects the selected area. You can choose the background you see. Herein, the controller 190 may recognize a direction of a person's gaze toward the transparent display through a picture received from the photographing apparatus 90, and select a background visible through the clip region in the recognized gaze direction.

그리고 제어부(190)는 선택한 배경에 해당하는 지역의 촬상을 제어하고, 촬상된 사진이 디스플레이되도록 투명 디스플레이(150)를 제어할 수 있다.The controller 190 may control imaging of an area corresponding to the selected background, and control the transparent display 150 to display the photographed picture.

외부 신호 수신부(135)는 외부 장치와 투명 디스플레이 장치(100)를 연결할 수 있는 인터페이스를 제공할 수 있다. 여기서 외부 장치는 DVD(Digital Versatile Disk), 블루레이(Bluray), 게임기기, 켐코더, 컴퓨터(노트북) 등 다양한 종류의 영상 또는 음성 출력 장치를 의미한다. 투명 디스플레이 장치(100)는 외부 신호 수신부(135)로부터 수신된 영상 신호 및 음성 신호가 디스플레이되도록 제어할 수 있고, 데이터 신호를 저장하거나 사용할 수 있다.The external signal receiver 135 may provide an interface for connecting the external device to the transparent display device 100. Here, the external device refers to various kinds of video or audio output devices such as a digital versatile disk (DVD), a Blu-ray, a game device, a camcorder, a computer (laptop), and the like. The transparent display apparatus 100 may control the video signal and the audio signal received from the external signal receiver 135 to be displayed, and may store or use the data signal.

또한 외부 장치는 촬영 장치(90)일 수 있다. 촬영 장치(90)는 복수의 카메라를 포함할 수 있다. 촬영 장치(90)는 사람을 촬상할 수 있다. 촬영 장치(90)는 사람의 얼굴 영역을 인식하여 얼굴 영역에 초점을 맞추고, 줌인하여 촬상할 수 있고, 사람의 손 영역을 인식하여 손 영역에 초점을 맞추고, 줌인하여 촬상할 수 있다. 여기서 촬상된 손 모양은 제스처로 인식될 수 있다. 즉 제어부(190)는 인식된 손 모양과 연관된 동작들을 수행하는 명령어들을 실행할 수 있다.Also, the external device may be the photographing device 90. The photographing apparatus 90 may include a plurality of cameras. The imaging device 90 can image a person. The photographing apparatus 90 may recognize a human face area, focus on the face area, and zoom in to capture an image, and recognize the human hand area to focus on the hand area, and zoom in to capture an image. In this case, the captured hand may be recognized as a gesture. That is, the controller 190 may execute commands for performing operations associated with the recognized hand.

촬영 장치(90)는 투명 디스플레이(150)의 배경을 촬상할 수 있다. 즉 촬영 장치(90)는 투명 디스플레이 장치(100)의 제어 신호에 따라 결정된 시선 방향에서 투명 디스플레이(150)의 클롭영역을 통해 보이는 배경을 촬상할 수 있다. 촬영 장치(90)는 촬상된 지역을 인식하여 인식된 지역에 초점을 맞추고, 줌인하여 인식된 지역을 촬상할 수 있다. 또한 지역은 복수의 다른 위치에서 촬영 장치(90)에 의해 촬상될 수 있다.The photographing apparatus 90 may capture a background of the transparent display 150. That is, the photographing apparatus 90 may capture a background seen through the crop region of the transparent display 150 in the gaze direction determined according to the control signal of the transparent display apparatus 100. The photographing apparatus 90 may recognize the captured region, focus on the recognized region, and zoom in to capture the recognized region. Regions may also be imaged by the imaging device 90 at a plurality of different locations.

도 9는 투명 디스플레이 장치의 제어부에 대한 바람직한 일실시예의 구성을 도시한 블록도이다.9 is a block diagram illustrating a configuration of a preferred embodiment of the control unit of the transparent display device.

도 9를 참조하면, 제어부(190)는 시선 방향 인식부(910), 중앙 처리부(920) 및 지역 탐지부(930)를 포함할 수 있다.Referring to FIG. 9, the controller 190 may include a gaze direction recognition unit 910, a central processing unit 920, and an area detector 930.

시선 방향 인식부(910)는 찰영 장치(92)가 촬영한 영상 프레임에서 얼굴 영역을 검출할 수 있다. 그리고 시선 방향 인식부(910)는 검출한 얼굴 영역에서 눈 영상을 검출하고, 검출한 눈 영상을 이용하여 시선 방향을 결정할 수 있다.The gaze direction recognizing unit 910 may detect a face region in the image frame photographed by the imaging device 92. The gaze direction recognition unit 910 may detect an eye image in the detected face region, and determine a gaze direction using the detected eye image.

시선 방향을 결정하기 위한 일실시예로, 시선 방향 인식부(910)는 저장된 눈 영상들 각각과 검출된 눈 영상의 차이값을 산출하여, 저장된 눈 영상 중에 검출된 눈 영상과의 차이값이 가장 작은 눈 영상을 선택할 수 있다. 그리고 시선 방향 인식부(910)는 선택한 눈 영상과 매핑된 시선 방향 정보가 지시하는 시선 방향을 검출한 눈 영상의 시선 방향으로 결정할 수 있다.In one embodiment for determining the gaze direction, the gaze direction recognizer 910 calculates a difference value between each of the stored eye images and the detected eye image, so that the difference value between the detected eye image is best among the stored eye images. You can select a small eye image. The gaze direction recognizer 910 may determine the gaze direction of the eye image detected by the gaze direction indicated by the gaze direction information mapped to the selected eye image.

중앙 처리부(920)는 찰영 장치(92)가 촬영한 영상 프레임에서 손 영역을 검출할 수 있다. 그리고 중앙 처리부(920)는 저장된 손 모양 각각과 검출된 손 영역에 표시된 손 모양을 비교하여, 저장된 손 모양 중 검출된 손 영역에 표시된 손 모양과 같은 손 모양을 선택할 수 있다. 그리고 중앙 처리부(920)는 선택된 손 모양과 연관된 동작을 수행하는 명령어를 실행할 수 있다.The central processing unit 920 may detect a hand region in the image frame photographed by the imaging device 92. The central processing unit 920 may select a hand shape such as a hand shape displayed on the detected hand area among the stored hand shapes by comparing each of the stored hand shapes with the hand shapes displayed on the detected hand area. The CPU 920 may execute a command for performing an operation associated with the selected hand.

지역 탐지부(930)는 지역 선택 정보를 기초로 선택된 클록영역을 통해 보이는 배경으로 찰영 장치(94)의 초점의 이동을 제어하고 찰영 장치(94)의 촬상을 제어할 수 있다.The area detector 930 may control the movement of the focus of the shooting device 94 and control the imaging of the shooting device 94 with the background visible through the clock area selected based on the area selection information.

도 10은 본 발명에 따른 지역 정보 제공 방법에 대한 바람직한 일실시예의 수행과정을 도시한 블록도이다.10 is a block diagram showing a process of performing a preferred embodiment of the method for providing region information according to the present invention.

도 10을 참조하면, 중앙 처리부(920)는 투명 디스플레이(150) 상의 제1 위치에서 다운 이벤트를 검출한다(S1000).Referring to FIG. 10, the central processing unit 920 detects a down event at a first position on the transparent display 150 (S1000).

중앙 처리부(920)는 투명 디스플레이(150) 상의 제2 위치에서 업 이벤트를 검출한다(S1010).The central processor 920 detects an up event at a second position on the transparent display 150 (S1010).

시선방향 인식부(910)는 시선 방향을 결정한다(S1020). 여기서 시선방향 인식부(910)는 사람 위치한 공간에서 제1 위치 및 제2 위치를 포함하는 영역으로 향하는 방향을 시선 방향으로 결정할 수 있다. 또한 제1 위치 및 제2 위치를 포함하는 영역은 클롭영역으로 명명될 수 있다.The gaze direction recognition unit 910 determines the gaze direction (S1020). Here, the gaze direction recognition unit 910 may determine a direction toward the area including the first position and the second position in the space where the person is located as the gaze direction. In addition, the region including the first position and the second position may be referred to as a clop region.

지역 탐지부(930)는 시선방향 인식부(910)가 결정한 시선 방향에서 투명 디스플레이(150) 상의 제1 위치 및 제2 위치를 포함하는 영역을 통해 보이는 지역을 선택하고 선택한 지역의 촬상을 제어한다(S1030). 여기서 다른 실시예로, 지역 탐지부(930)는 상기 지역 투명 디스플레이(150)의 수직 방향에서 제1 위치 및 제2 위치를 포함하는 영역을 통해 보이는 지역을 선택할 수 있다.The area detector 930 selects an area visible through an area including the first location and the second location on the transparent display 150 in the gaze direction determined by the gaze direction recognition unit 910, and controls imaging of the selected area. (S1030). In another embodiment, the area detector 930 may select an area visible through an area including a first location and a second location in a vertical direction of the area transparent display 150.

중앙 처리부(920)는 선택된 지역이 촬상된 이미지 및 적어도 하나의 메뉴가 디스플레이되도록 제어한다(S1040). 여기서 디스플레이되는 화면은 도 4에 도시된 화면(400)일 수 있다. 또한 중앙 처리부(920)는 탐지한 객체의 위치 정보를 산출할 수 있다. 그리고 중앙 처리부(920)는 산출한 위치 정보가 단계 S1040에서 디스플레이되도록 제어할 수 있고, 탐지한 객체에 대한 정보를 획득하기 위해 산출한 위치 정보를 이용할 수 있다. The central processor 920 controls to display an image photographed with the selected area and at least one menu in operation S1040. The screen displayed here may be the screen 400 illustrated in FIG. 4. In addition, the central processing unit 920 may calculate location information of the detected object. The CPU 920 may control the calculated position information to be displayed in operation S1040, and use the calculated position information to obtain information about the detected object.

중앙 처리부(920)는 탐지된 객체의 위치 정보를 위치 응용 서버(20)로부터 획득할 수 있고, 자신의 위치 정보로부터 탐지된 객체의 위치 정보를 산출할 수 있다. 중앙 처리부(920)는 Cell ID 방식, AOA 방식 및 TDOA 방식 등의 네트워크 기반(Network-based) 기술을 이용하여 기지국(40)으로부터 수신된 전파를 통해 투명 디스플레이 장치(100)의 위치를 측위할 수 있다. 또한 중앙 처리부(920)는 TOA(Time Of Arrivals) 방식, GPS(Global Positioning System) 방식 및 Hybrid 측위 방식 등의 Handset-based 측위 기술을 이용하여 위성(30)로부터 수신된 신호를 통해 투명 디스플레이 장치(100)의 위치를 측위할 수 있다. 또한 중앙 처리부(920)는 투명 디스플레이 장치(100)를 중심으로 탐지된 객체의 위치를 영상인식 기반 기술 또는 초음파 기반 기술을 이용하여 측위할 수 있다.The central processing unit 920 may obtain the location information of the detected object from the location application server 20, and calculate the location information of the detected object from its location information. The central processing unit 920 may position the transparent display apparatus 100 through radio waves received from the base station 40 using network-based technologies such as Cell ID method, AOA method, and TDOA method. have. In addition, the central processing unit 920 uses a handset-based positioning technology such as a time of arrival (TOA) method, a global positioning system (GPS) method, and a hybrid positioning method. 100) can be positioned. In addition, the central processing unit 920 may position the detected object based on the transparent display device 100 by using an image recognition technology or an ultrasound technology.

중앙 처리부(920)는 디스플레이된 적어도 하나의 메뉴 중 하나가 선택되었는지 여부를 확인한다(S1050).The central processing unit 920 checks whether one of the displayed at least one menu is selected (S1050).

디스플레이된 적어도 하나의 메뉴 중 하나가 선택된 경우에는, 중앙 처리부(920)는 선택된 메뉴와 연관된 화면이 디스플레이되도록 제어한다(S1060). 여기서 연관된 화면은 촬상된 지역의 지도가 포함될 수 있고, 촬상된 지역에 대한 정보가 포함될 수 있다. 또한 연관된 화면은 도 5에 도시된 화면(500) 또는 도 7에 도시된 화면(700)일 수 있다. 지역에 대한 정보인 지역 정보는 지역명칭, 지역에 포함된 각 지점에 대한 지점 정보, 지역의 지도, 지역 주소 및 지역 소개 중 적어도 하나를 포함할 수 있다. 지역 정보는 저장부(180)에 저장된 정보로부터 검색된 정보일 수 있고, 지역 정보 제공 서버(10)로부터 수신된 정보일 수 있다.When one of the displayed at least one menu is selected, the central processing unit 920 controls to display a screen associated with the selected menu (S1060). The associated screen may include a map of the photographed area and may include information about the photographed area. The associated screen may be the screen 500 shown in FIG. 5 or the screen 700 shown in FIG. 7. The region information, which is information about the region, may include at least one of a region name, branch information for each branch included in the region, a map of the region, a region address, and a region introduction. The area information may be information retrieved from information stored in the storage unit 180 or may be information received from the area information providing server 10.

중앙 처리부(920)는 영역 이동 명령이 수신되었는지 여부를 확인한다(S1070). 여기서 영역 이동 명령은 찰영 장치(92)가 촬상한 영상 프레임에 포함된 손 모양을 통해 인식된 제스처를 통해 생성된 명령일 수 있고, 다운 이벤트, 드래깅 이벤트 및 업 이벤트로 인식되는 동적 제스처를 통해 생성된 명령일 수 있다.The central processing unit 920 checks whether an area movement command has been received (S1070). Here, the area movement command may be a command generated through a gesture recognized through a hand shape included in the image frame photographed by the imaging device 92, and generated through a dynamic gesture recognized as a down event, a dragging event, and an up event. May be a command.

영역 이동 명령이 수신된 경우에는, 지역 탐지부(930)는 영역 이동 명령에 따라 클롭영역을 이동시키고, 이동된 클롭영역을 통해 보이는 배경을 선택하고, 선택한 배경에 해당하는 지역을 촬상한다(S1080).When the area move command is received, the area detector 930 moves the clip area according to the area move command, selects a background visible through the moved clip area, and captures an area corresponding to the selected background (S1080). ).

중앙 처리부(920)는 지역이 촬상된 이미지 및 적어도 하나의 메뉴가 디스플레이되도록 제어한다(S1090).The central processor 920 controls to display an image photographed with the region and at least one menu in operation S1090.

도 11a 내지 도 11d는 선택된 배경의 일부 영역 및 인식된 제스처가 디스플레이된 화면을 도시한 도면이다.11A to 11D illustrate screens on which a partial region of a selected background and a recognized gesture are displayed.

도 11a 내지 도 11d를 참조하면, 투명 디스플레이 상의 클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1110)에서 제스처(1111)가 인식되면, 상기 클롭영역은 제스처(1111)에 따라 상측으로 이동되고, 화면(1110)은 상측으로 이동된 클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1120)으로 전환된다. 인식되는 제스처(1111)는 화면에 디스플레이될 수 있고, 제스처(1111)와 연관된 명령이 수행되면 화면에서 사라질 수 있다. 일부 실시예로, 인식된 제스처(1111)는 화면에 디스플레이 안 될 수 있다.11A to 11D, when a gesture 1111 is recognized on a screen 1110 displaying an area image of an area visible from a clip area on the transparent display, the clip area is moved upwards according to the gesture 1111. The screen 1110 is switched to the screen 1120 which displays an image of a region of the region visible from the moved region of the image. The recognized gesture 1111 may be displayed on the screen and may disappear from the screen when a command associated with the gesture 1111 is performed. In some embodiments, the recognized gesture 1111 may not be displayed on the screen.

클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1120)에서 제스처(1121)가 인식되면, 상기 클롭영역은 제스처(1121)에 따라 우측 이동되고, 화면(1120)은 우측 이동된 클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1130)으로 전환된다.When the gesture 1121 is recognized on the screen 1120 displaying an area image of the area visible from the clip area, the clip area is moved to the right according to the gesture 1121, and the screen 1120 is displayed to the right from the clip area. The screen 1130 displays a region image of the region.

클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1130)에서 제스처(1131)가 인식되면, 상기 클롭영역은 제스처(1131)에 따라 좌측 이동되고, 화면(1130)은 좌측으로 이동된 클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1140)으로 전환된다.When the gesture 1131 is recognized on the screen 1130 of displaying a region image of the area visible from the crop region, the crop region is moved left according to the gesture 1131, and the screen 1130 is moved to the left region of the crop region. The screen 1140 displays a region image of the visible region.

클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면(1140)에서 제스처(1141)가 인식되면, 상기 클롭영역은 제스처(1141)에 따라 하측 이동되고, 화면(1140)은 하측으로 이동된 클롭영역에서 보이는 지역의 지역 이미지를 디스플레이하는 화면으로 전환된다.When the gesture 1141 is recognized on the screen 1140 of displaying a region image of the area visible from the crop region, the crop region is moved downward according to the gesture 1141, and the screen 1140 is moved from the crop region moved downward. This will switch to a screen that displays a regional image of the visible area.

도 12는 시선 방향 인식 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면이다.12 is a flowchart illustrating a preferred embodiment of a gaze direction recognizing method.

도 12를 참조하면, 시선 방향 인식부(910)는 찰영 장치(92)를 통하여 촬상된 영상 중에서 얼굴 영역을 검출한다(S1200).Referring to FIG. 12, the gaze direction recognition unit 910 detects a face region from an image captured by the imaging apparatus 92 (S1200).

시선 방향 인식부(910)는 검출한 얼굴 영역에서 눈 영상을 검출한다(S1210).The gaze direction recognizing unit 910 detects an eye image in the detected face area (S1210).

시선 방향 인식부(910)는 검출한 눈 영상과 저장된 눈 영상을 비교한다(S1220). 여기서 시선 방향 인식부(910)는 비교 결과로 저장된 눈 영상 각각과 검출한 눈 영상과의 차이값을 산출할 수 있다. The gaze direction recognition unit 910 compares the detected eye image with the stored eye image (S1220). Here, the gaze direction recognition unit 910 may calculate a difference value between each of the stored eye images and the detected eye images as a result of the comparison.

시선 방향 인식부(910)는 비교 결과를 기초로 저장된 눈 영상 중에서 검출한 눈 영상과 가장 유사한 눈 영상을 선택한다(S1230). 여기서 시선 방향 인식부(910)는 저장된 눈 영상 중에서 검출한 눈 영상과 가장 차이값이 작은 눈 영상을 선택할 수 있다.The gaze direction recognizing unit 910 selects an eye image most similar to the detected eye image based on the comparison result (S1230). Here, the gaze direction recognizer 910 may select an eye image having the smallest difference from the detected eye image among the stored eye images.

시선 방향 인식부(910)는 선택한 눈 영상에 따른 시선 방향을 결정한다(S1240). 여기서, 시선 방향 인식부(910)는 선택한 눈 영상과 매칭된 시선 방향 정보를 독출하고, 독출한 시선 방향 정보가 지시하는 시선 방향으로 검출한 눈 영상의 시선 방향으로 결정할 수 있다.The gaze direction recognition unit 910 determines the gaze direction according to the selected eye image (S1240). Here, the gaze direction recognition unit 910 may read gaze direction information matched with the selected eye image and determine the gaze direction of the eye image detected in the gaze direction indicated by the read gaze direction information.

도 13은 본 발명에 따른 지역 정보 제공 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면이다.FIG. 13 is a flowchart illustrating another preferred embodiment of a method for providing region information according to the present invention.

도 13을 참조하면, 입력장치(170)는 지역 선택 정보를 입력받는다(S1300). 여기서 지역 선택 정보는 다운 이벤트일 수 있다.Referring to FIG. 13, the input apparatus 170 receives region selection information (S1300). The region selection information may be a down event.

지역 탐지부(930)는 다운 이벤트가 발생된 위치를 중심으로 하는 특정 영역을 클롭영역으로 결정한다(S1310). 여기서 특정 영역의 크기는 디폴트로 설정될 수 있고, 사용자에 의해 설정될 수 있다.The area detector 930 determines a specific area centered on the location where the down event is generated as a clop area (S1310). Herein, the size of a specific area may be set as a default and may be set by a user.

시선방향 인식부(910)는 시선 방향을 결정한다(S1320). 여기서 시선방향 인식부(910)는 사용자의 눈의 위치에서 지역 탐지부(930)가 결정한 클롭영역으로 향하는 방향을 시선 방향으로 결정할 수 있다. 또는 시선방향 인식부(910)는 사용자의 눈 영상으로부터 결정된 방향을 시선 방향으로 결정할 수 있다.The gaze direction recognition unit 910 determines the gaze direction (S1320). In this case, the gaze direction recognizer 910 may determine a direction from the position of the user's eyes to the crop region determined by the area detector 930 as the gaze direction. Alternatively, the gaze direction recognition unit 910 may determine the direction determined from the eye image of the user as the gaze direction.

지역 탐지부(930)는 시선방향 인식부(910)가 결정한 시선 방향에서 클롭영역을 통해 보이는 지역을 선택하고 선택한 지역의 촬상을 제어한다(S1330). 여기서 다른 실시예로, 지역 탐지부(930)는 지역 투명 디스플레이(150)의 수직 방향에서 클롭영역을 통해 보이는 지역을 선택할 수 있다.The area detector 930 selects an area visible through the clip area in the gaze direction determined by the gaze direction recognition unit 910 and controls imaging of the selected area (S1330). In another embodiment, the area detector 930 may select an area visible through the crop area in the vertical direction of the area transparent display 150.

중앙 처리부(920)는 선택된 지역이 촬상된 이미지 및 적어도 하나의 메뉴가 디스플레이되도록 제어한다(S1340). 여기서 디스플레이되는 화면은 도 4에 도시된 화면(400)일 수 있다.The central processing unit 920 controls to display an image photographed with the selected area and at least one menu in operation S1340. The screen displayed here may be the screen 400 illustrated in FIG. 4.

또한 13에는 도시되어 있지 않으나, 도 13의 지역 정보 제공 방법은 도 10에 도시된 단계 S1050 내지 S1080을 더 포함할 수 있다.Although not shown in FIG. 13, the method for providing region information of FIG. 13 may further include steps S1050 to S1080 shown in FIG. 10.

도 14는 본 발명에 따른 투명 디스플레이 장치에 대한 바람직한 다른 실시예의 구성을 도시한 블록도이다.14 is a block diagram showing the configuration of another preferred embodiment of a transparent display device according to the present invention.

도 14를 참조하면, 도 14의 투명 디스플레이 장치(100)는 튜너부(110), 복조부(120), 네트워크 인터페이스부(130), 신호 처리부(140), 투명 디스플레이(150), 음성 출력부(160), 입력장치(170), 저장부(180), 제어부(190), 외부 신호 수신부(1435) 및 촬영 장치(1490)를 포함한다. 제어부(190)는 촬영 장치(1490)의 이동, 포커스, 줌인 및 줌 아웃 그리고 촬상을 제어한다. 촬영 장치(1490)는 제어부의 제어에 따라 투명 디스플레이(150)를 통해 보이는 후방 객체 및 투명 디스플레이(150)의 주위에 위치하는 사람을 촬상한다. 촬영 장치(150)는 복수의 카메라를 포함할 수 있다.Referring to FIG. 14, the transparent display apparatus 100 of FIG. 14 includes a tuner unit 110, a demodulator 120, a network interface unit 130, a signal processor 140, a transparent display 150, and an audio output unit. 160, an input device 170, a storage unit 180, a controller 190, an external signal receiver 1435, and a photographing apparatus 1490. The controller 190 controls movement, focus, zoom in and zoom out, and imaging of the photographing apparatus 1490. The photographing apparatus 1490 photographs a rear object visible through the transparent display 150 and a person located around the transparent display 150 under the control of the controller. The photographing apparatus 150 may include a plurality of cameras.

도 14의 투명 디스플레이 장치(100)는 촬영 장치(1490)를 포함한다는 점에서 도 8의 투명 디스플레이 장치(100)와 차이가 있으며, 도 14의 투명 디스플레이 장치(100)의 나머지 구성요소는 각각 도 8의 투명 디스플레이 장치(100)의 구성요소와 대응되는 점에서, 각 구성요소에 대한 상세한 설명을 이하 생략한다.The transparent display device 100 of FIG. 14 differs from the transparent display device 100 of FIG. 8 in that it includes the photographing apparatus 1490. The remaining components of the transparent display device 100 of FIG. In the correspondence with the components of the transparent display apparatus 100 of FIG. 8, detailed description of each component will be omitted below.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 장치에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer apparatus is stored. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may be implemented in the form of a carrier wave (for example, transmission via the Internet) . The computer-readable recording medium may also be distributed to networked computer devices so that computer readable code can be stored and executed in a distributed manner.

이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.Although the preferred embodiments of the present invention have been shown and described above, the present invention is not limited to the specific preferred embodiments described above, and the present invention belongs to the present invention without departing from the gist of the present invention as claimed in the claims. Various modifications can be made by those skilled in the art, and such changes are within the scope of the claims.

Claims (20)

투명 디스플레이를 통해 보이는 배경의 일부 영역을 선택하는 단계;
투명 디스플레이 상에 상기 선택된 일부 영역이 촬상된 이미지 및 적어도 하나의 메뉴를 디스플레이하는 단계; 및
상기 디스플레이된 적어도 하나의 메뉴 중 하나를 선택받으면, 선택된 메뉴와 연관된 화면을 디스플레이하며, 상기 디스플레이된 화면은 상기 일부 영역의 지도를 포함하는 단계;를 포함하는 것을 특징으로 하는 지역 정보 제공 방법.Selecting a portion of the background visible through the transparent display;
Displaying at least one menu and an image of the selected partial region on a transparent display; And
And if one of the displayed at least one menu is selected, displaying a screen associated with the selected menu, wherein the displayed screen includes a map of the partial region. 제 1항에 있어서,
상기 일부 영역을 선택하는 단계는,
상기 투명 디스플레이 상의 제1 위치에서 다운 이벤트(down event)를 검출하는 단계;
투명 디스플레이 상의 제2 위치에서 업 이벤트(up event)를 검출하는 단계; 및
상기 제1 위치 및 상기 제2 위치를 포함하는 영역을 통해 보이는 배경을 상기 일부 영역으로 선택하는 단계;를 포함하는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
Selecting the partial region,
Detecting a down event at a first location on the transparent display;
Detecting an up event at a second location on the transparent display; And
And selecting a background visible through an area including the first location and the second location as the partial area. 제 1항에 있어서,
상기 일부 영역을 선택하는 단계는,
지역 선택 정보를 입력받는 단계;
시선 방향을 결정하는 단계; 및
상기 입력된 지역 선택 정보에 따라 선택된 투명 디스플레이 영역 내에서 상기 결정된 시선 방향에서 상기 투명 디스플레이를 통해 보이는 배경을 상기 일부 영역으로 선택하는 단계;를 포함하는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
Selecting the partial region,
Receiving region selection information;
Determining a gaze direction; And
And selecting a background visible through the transparent display in the determined gaze direction as the partial region within the transparent display region selected according to the input region selection information. 제 3항에 있어서,
상기 시선 방향을 결정하는 단계는,
찰영 장치를 통하여 촬상된 영상 중에서 얼굴 영역을 검출하는 단계; 및
상기 검출된 얼굴 영역을 이용하여 시선 방향을 결정하는 단계;를 포함하는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 3,
The determining of the gaze direction may include:
Detecting a face region in an image captured by the imaging apparatus; And
And determining a gaze direction by using the detected face area. 제 3항에 있어서,
상기 시선 방향은 상기 투명 디스플레이의 방향과 수직 방향으로 결정되는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 3,
The gaze direction is determined in a direction perpendicular to the direction of the transparent display. 제 1항에 있어서,
상기 디스플레이된 적어도 하나의 메뉴는 지역 상세 표시 메뉴 및 연결 표시 메뉴 중 하나인 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
The displayed at least one menu is one of a region detailed display menu and a connection display menu. 제 1항에 있어서,
상기 디스플레이된 화면은 지점 정보를 표시하기 위한 적어도 하나의 정보 표시 객체를 더 포함하고, 상기 적어도 하나의 정보 표시 객체는 각각 표시할 지점 정보와 연관된 지점에 위치하는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
The displayed screen further includes at least one information display object for displaying point information, wherein the at least one information display object is located at a point associated with the point information to be displayed, respectively. 제 1항에 있어서,
상기 디스플레이된 화면은 특정 사람을 지시하는 적어도 하나의 연결 객체를 더 포함하고, 상기 적어도 하나의 연결 객체는 각각 지시하는 사람이 위치하는 지점에 표시되는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
The displayed screen further includes at least one connection object indicating a specific person, wherein each of the at least one connection object is displayed at a point where the indicating person is located. 제 8항에 있어서,
상기 적어도 하나의 연결 객체 중에 하나가 선택되면, 상기 선택된 연결 객체가 지시하는 사람의 연락 정보를 기초로 신호를 전송하는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 8,
And when one of the at least one connection object is selected, transmitting a signal based on contact information of a person indicated by the selected connection object. 제 1항에 있어서,
상기 선택된 일부 영역은 인식된 제스처에 따라 변경되는 것을 특징으로 하는 지역 정보 제공 방법.The method of claim 1,
The selected partial region is changed according to the recognized gesture. 배경을 투과하는 투명 디스플레이; 및
상기 투명 디스플레이를 통해 보이는 배경의 일부 영역을 선택하고, 상기 투명 디스플레이 상에 상기 선택된 일부 영역이 촬상된 이미지 및 적어도 하나의 메뉴가 디스플레이되도록 제어하고, 상기 디스플레이된 적어도 하나의 메뉴 중 하나를 선택받는 경우에는, 선택된 메뉴와 연관된 화면이 디스플레이되도록 제어부;를 포함하고,
상기 디스플레이된 화면은 상기 일부 영역의 지도를 포함하는 것을 특징으로 하는 투명 디스플레이 장치.A transparent display penetrating the background; And
Select a partial region of the background visible through the transparent display, control to display an image and at least one menu of the selected partial region on the transparent display, and receive one of the displayed at least one menu In some cases, the controller may be configured to display a screen associated with the selected menu.
The displayed screen includes a map of the partial area. 제 11항에 있어서,
상기 제어부는,
상기 투명 디스플레이 상의 제1 위치에서 다운 이벤트(down event)를 검출하고, 투명 디스플레이 상의 제2 위치에서 업 이벤트(up event)를 검출하며, 상기 제1 위치 및 상기 제2 위치를 포함하는 영역을 통해 보이는 배경을 상기 일부 영역으로 선택하는 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The control unit,
Detect a down event at a first location on the transparent display, detect an up event at a second location on the transparent display, and through an area comprising the first location and the second location And a visible background as the partial region. 제 11항에 있어서,
지역 선택 정보를 입력받는 입력장치를 더 포함하고,
상기 제어부는 시선 방향을 결정하고, 상기 입력된 지역 선택 정보에 따라 선택된 투명 디스플레이 영역 내에서 상기 결정된 시선 방향에서 상기 투명 디스플레이를 통해 보이는 배경을 상기 일부 영역으로 선택하는 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The apparatus further includes an input device for receiving region selection information.
And the control unit determines a gaze direction and selects, as the partial region, a background viewed through the transparent display in the determined gaze direction within the transparent display area selected according to the input region selection information. 제 13항에 있어서,
상기 제어부는,
찰영 장치를 통하여 촬상된 영상 중에서 얼굴 영역을 검출하고, 상기 검출된 얼굴 영역을 이용하여 시선 방향을 결정하는 것을 특징으로 하는 투명 디스플레이 장치.The method of claim 13,
The control unit,
And detecting a face region from an image captured by the imaginary device, and determining a gaze direction by using the detected face region. 제 13항에 있어서,
상기 제어부는,
상기 투명 디스플레이의 방향과 수직 방향을 시선 방향으로 결정하는 것을 특징으로 하는 투명 디스플레이 장치.The method of claim 13,
The control unit,
And a direction perpendicular to the direction of the transparent display as a line of sight. 제 11항에 있어서,
상기 디스플레이된 적어도 하나의 메뉴는 지역 상세 표시 메뉴 및 연결 표시 메뉴 중 하나인 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The displayed at least one menu is one of a region detailed display menu and a connection display menu. 제 11항에 있어서,
상기 디스플레이된 화면은 지점 정보를 표시하기 위한 적어도 하나의 정보 표시 객체를 더 포함하고, 상기 적어도 하나의 정보 표시 객체는 각각 표시할 지점 정보와 연관된 지점에 위치하는 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The displayed screen further includes at least one information display object for displaying point information, wherein the at least one information display object is located at a point associated with the point information to be displayed, respectively. 제 11항에 있어서,
상기 디스플레이된 화면은 특정 사람을 지시하는 적어도 하나의 연결 객체를 더 포함하고, 상기 적어도 하나의 연결 객체는 각각 지시하는 사람이 위치하는 지점에 표시되는 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The displayed screen further includes at least one connection object indicating a specific person, wherein the at least one connection object is displayed at a point where a person indicating the position is located. 제 18항에 있어서,
상기 제어부는,
상기 적어도 하나의 연결 객체 중에 하나가 선택된 경우에는, 상기 선택된 연결 객체가 지시하는 사람의 연락 정보를 기초로 신호가 전송되도록 제어하는 것을 특징으로 하는 투명 디스플레이 장치.19. The method of claim 18,
The control unit,
And when one of the at least one connection object is selected, controlling to transmit a signal based on contact information of a person indicated by the selected connection object. 제 11항에 있어서,
상기 선택된 일부 영역은 인식된 제스처에 따라 변경되는 것을 특징으로 하는 투명 디스플레이 장치.12. The method of claim 11,
The selected partial area is changed according to the recognized gesture.
KR1020100091194A 2010-09-16 2010-09-16 Transparent display device and method for providing local information KR101663619B1 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020100091194A KR101663619B1 (en) 2010-09-16 2010-09-16 Transparent display device and method for providing local information
EP11179960.7A EP2431895B1 (en) 2010-09-16 2011-09-02 Transparent display device and method for providing information using the same
US13/232,787 US20120069050A1 (en) 2010-09-16 2011-09-14 Transparent display device and method for providing information using the same
CN201110276141.2A CN102402390B (en) 2010-09-16 2011-09-16 Transparent display device and use transparent display device provide the method for information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100091194A KR101663619B1 (en) 2010-09-16 2010-09-16 Transparent display device and method for providing local information

Publications (2)

Publication Number Publication Date
KR20120029229A true KR20120029229A (en) 2012-03-26
KR101663619B1 KR101663619B1 (en) 2016-10-07

Family

ID=46133762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100091194A KR101663619B1 (en) 2010-09-16 2010-09-16 Transparent display device and method for providing local information

Country Status (1)

Country Link
KR (1) KR101663619B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150142748A (en) * 2014-06-11 2015-12-23 (주)피엑스디 Appratus for providing augmented information combined with digital screen and printed media and method thereof
KR20170000904A (en) * 2015-06-24 2017-01-04 삼성디스플레이 주식회사 Display apparatus and method of driving the same
WO2018016666A1 (en) * 2016-07-21 2018-01-25 한화테크윈 주식회사 Method and apparatus for setting parameter

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102054379B1 (en) * 2018-07-18 2019-12-10 울산과학기술원 Real-time visualization apparatus for displaying fine dust

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090047889A (en) * 2007-11-08 2009-05-13 한국전자통신연구원 The method, apparatus and system for realizing augmented reality using transparent display
JP2009192448A (en) * 2008-02-18 2009-08-27 Tama Art Univ Information display device and information providing system
KR20090100938A (en) * 2008-03-21 2009-09-24 엘지전자 주식회사 Mobile terminal and screen displaying method thereof
KR20100038646A (en) * 2008-10-06 2010-04-15 픽스코리아 주식회사 Advertisement system using panorama pictures of electronic map

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090047889A (en) * 2007-11-08 2009-05-13 한국전자통신연구원 The method, apparatus and system for realizing augmented reality using transparent display
JP2009192448A (en) * 2008-02-18 2009-08-27 Tama Art Univ Information display device and information providing system
KR20090100938A (en) * 2008-03-21 2009-09-24 엘지전자 주식회사 Mobile terminal and screen displaying method thereof
KR20100038646A (en) * 2008-10-06 2010-04-15 픽스코리아 주식회사 Advertisement system using panorama pictures of electronic map

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150142748A (en) * 2014-06-11 2015-12-23 (주)피엑스디 Appratus for providing augmented information combined with digital screen and printed media and method thereof
KR20170000904A (en) * 2015-06-24 2017-01-04 삼성디스플레이 주식회사 Display apparatus and method of driving the same
WO2018016666A1 (en) * 2016-07-21 2018-01-25 한화테크윈 주식회사 Method and apparatus for setting parameter
KR20180010504A (en) * 2016-07-21 2018-01-31 한화테크윈 주식회사 The Method And The Apparatus For Setting The Parameter
US10802676B2 (en) 2016-07-21 2020-10-13 Hanwha Techwin Co., Ltd. Method and apparatus for setting parameter
US11360642B2 (en) 2016-07-21 2022-06-14 Hanwha Techin Co., Ltd. Method and apparatus for setting parameter

Also Published As

Publication number Publication date
KR101663619B1 (en) 2016-10-07

Similar Documents

Publication Publication Date Title
KR20120029228A (en) Transparent display device and method for providing object information
US20120069050A1 (en) Transparent display device and method for providing information using the same
CN107801094B (en) Method of controlling source device at sink device and apparatus using the same
KR101832757B1 (en) An electronic device, a method for auto configuring menu using the same
KR101737839B1 (en) Transparent display device and method for detecting an object
KR101719989B1 (en) An electronic device and a interface method for configurating menu using the same
US8718624B2 (en) Electronic device and method for transmitting data
US9043709B2 (en) Electronic device and method for providing menu using the same
KR20120008328A (en) An electronic device including a touch screen display, a interface method using the same and computer-readable storage medium storing the same
KR20130128684A (en) Electronic device and method for information about service provider
KR101663619B1 (en) Transparent display device and method for providing local information
KR101789617B1 (en) An electronic device, a interface method for configuring menu using the same
CN106792224B (en) Terminal and video playing method
KR20130042674A (en) Display device and method of controling a camera using the same
KR20170091303A (en) Terminal and display system including the same
KR20140051804A (en) Display apparatus and method of controlling the smae
KR20120040347A (en) An electronic device, a method for providing moving information using the same
KR20180085555A (en) Display device and operating method thereof
KR101805532B1 (en) An electronic device, a method for auto configuring menu using the same
KR20120038826A (en) An electronic device and a method for providing electronic diary service, and an interface method for electronic diary service
KR102246092B1 (en) Image display device, mobile terminal and control method for the image display device and the mobile terminal
KR20140142589A (en) Image display device and operation method of the image display device

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20190809

Year of fee payment: 4