KR102255832B1

KR102255832B1 - 투명 디스플레이 기기상에 정보를 디스플레이 하는 시스템 및 방법

Info

Publication number: KR102255832B1
Application number: KR1020130106227A
Authority: KR
Inventors: 이창수; 강경아
Original assignee: 삼성전자주식회사
Priority date: 2012-09-19
Filing date: 2013-09-04
Publication date: 2021-05-26
Also published as: KR20140037753A

Abstract

투명 디스플레이 기기상에 정보를 디스플레이 할 수 있는 방법과 시스템은 투명 디스플레이 기기의 화면을 통해 보이는 외부 기기의 화면상에 디스플레이 되고 있는 객체를 선택하는 터치 입력을 수신하고, 객체에 관한 정보를 외부 기기로 요청하고, 외부 기기로부터 객체에 관한 정보를 수신하고, 투명 디스플레이 기기의 화면상에 수신된 정보를 디스플레이 하는 단계를 포함한다.

Description

투명 디스플레이 기기상에 정보를 디스플레이 하는 시스템 및 방법{SYSTEM AND METHOD FOR DISPLAYING INFORMATION ON TRANSPARENT DISPLAY DEVICE}

본 발명은 정보 디스플레이에 관한 것으로, 특히, 투명 디스플레이 기기상에 외부 객체 또는 외부 기기에 관한 정보를 디스플레이 하는 방법 및 시스템에 관한 것이다.

투명 디스플레이 기기가 차세대 디스플레이 기기로 고려되고 있다. 투명 디스플레이 기기는 투명 디스플레이 기기를 통해 외부 객체 또는 외부 기기를 사용자가 볼 수 있는 투명도를 갖는다.

그러나 투명 디스플레이 기기는 상기 외부 객체 또는 상기 외부 기기에 관련된 정보를 디스플레이 하지 않는다.

본 발명이 해결하고자 하는 과제는 투명 디스플레이 기기의 화면을 통해 보이는 외부 기기에 관련된 정보를 투명 디스플레이 기기의 화면상에 디스플레이 할 수 있는 정보 디스플레이 방법 및 시스템, 기기와 그 기록 매체를 제공하는데 있다.

본 발명이 해결하고자 하는 다른 과제는 투명 디스플레이 기기의 화면을 통해 보이는 외부 기기의 화면에 디스플레이 되고 있는 객체에 관한 정보를 투명 디스플레이 기기의 화면에 디스플레이 할 수 있는 정보 디스플레이 방법 및 시스템, 기기와 그 기록 매체를 제공하는데 있다.

본 발명이 해결하고자 하는 또 다른 과제는 투명 디스플레이 기기의 화면을 통해 보이는 외부 객체에 관한 정보를 투명 디스플레이 기기의 화면에 디스플레이 할 수 있는 정보 디스플레이 방법, 시스템, 기기와 그 기록 매체를 제공하는데 있다.

상기 과제들을 달성하기 위한 바람직한 실시 예에 따른 투명 디스플레이 기기상에 정보를 디스플레이 하는 방법은, 투명 디스플레이 기기의 화면을 통해 보이는 외부 기기상에 디스플레이 되고 있는 객체를 선택하는 투명 디스플레이 기기상에 터치 입력을 수신하는 단계; 상기 객체에 관한 정보를 상기 외부 기기로 요청하는 단계; 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하는 단계; 및 상기 수신된 정보를 상기 투명 디스플레이 기기의 상기 화면상에 디스플레이 하는 단계를 포함하는 것이 바람직하다.

상기 터치 입력은, 상기 화면을 통해 보이는 상기 객체의 윤곽선을 나타내거나 상기 객체가 상기 화면을 통해 보이는 상기 화면상의 위치를 나타내는 탭 기반 터치이거나 상기 객체가 상기 화면을 통해 보이는 상기 화면상의 닫힌 영역을 나타낼 수 있다.

상기 객체에 관한 정보는, 상기 객체의 타입과 동일한 타입을 갖는 적어도 하나의 다른 객체를 나타내고, 상기 적어도 하나의 다른 객체의 상기 외부 기기의 화면상의 디스플레이 위치는 상기 객체의 상기 외부 기기의 화면상의 디스플레이 위치와 다를 수 있다.

상기 객체에 관한 정보는 상기 외부 기기의 화면상에 디스플레이 되고 있지 않은 정보를 나타낼 수 있다.

상기 디스플레이 하는 단계는, 상기 외부 기기의 화면상에 상기 객체의 디스플레이 위치에 대응하는 상기 투명 디스플레이 기기의 화면상에 디스플레이 위치에 상기 수신된 정보를 디스플레이 하는 단계를 포함할 수 있다.

상기 방법은, 상기 투명 디스플레이 기기와 상기 외부 기기간의 인터랙션에 기초하여 상기 투명 디스플레이 기기에 디스플레이 되고 있는 상기 정보를 편집하는 단계를 더 포함할 수 있다.

상기 방법은, 증강 현실 서비스에 기초한 상기 외부 기기에 관한 정보를 상기 투명 디스플레이 기기의 상기 화면상에 디스플레이 하는 단계를 더 포함할 수 있다.

상기 정보를 요청하는 단계, 및 상기 정보를 수신하는 단계는, 기기간 직접 통신, 서버를 통한 통신, 및 중계기를 통한 통신중 하나에 기초하여 수행될 수 있다.

상기 과제들을 달성하기 위한 바람직한 실시 예에 따른 투명 디스플레이 기기는, 보이는 외부 기기상에 디스플레이 되고 있는 객체를 선택하는 터치 입력을 수신하도록 구성된 투명 디스플레이; 상기 투명 디스플레이를 통해 보이는 외부 기기와 통신하도록 구성된 통신부; 상기 터치 입력에 기초하여 상기 객체에 관한 정보를 상기 외부 기기로 요청하고, 상기 요청에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하고, 상기 수신된 정보를 디스플레이 하기 위해 상기 투명 디스플레이를 제어하는 프로세서를 포함하는 것이 바람직하다.

상기 과제들을 달성하기 위한 본 발명의 실시 예에 따른 투명 디스플레이상에 정보를 디스플레이 방법은, 투명 디스플레이 기기의 화면을 통해 보이는 외부 기기의 제 1 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 1 터치 입력을 수신하는 단계; 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 화면상에 디스플레이 되고 있는 객체의 제 2 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 2 터치 입력을 수신하는 단계; 상기 제 1 위치 정보와 상기 제 2 위치 정보에 기초한 상기 객체에 관한 정보를 상기 외부 기기로 요청하는 단계; 상기 요청에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하는 단계; 및 상기 수신된 정보를 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 하는 단계를 포함할 수 있다.

상기 제 1 위치 정보는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선을 나타낼 수 있다.

상기 제 1 터치 입력은 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선을 나타내는 상기 투명 디스플레이 기기의 상기 화면상의 제 1 지점과 제 2 지점에 대한 독립된 터치 동작이 될 수 있다.

상기 제 1 터치 입력은, 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선을 나타내는 상기 투명 디스플레이 기기의 상기 화면상의 제 1 지점과 제 2 지점을 연결하는 터치 앤 드래그 동작이 될 수 있다.

상기 제 1 터치 입력은, 상기 투명 디스플레이 기기의 상기 화면상에 디스플레이 되고 있는 가이드 정보에 대한 터치 기반의 영역 조정 동작을 나타내고, 상기 가이드 정보에 대한 터치 기반의 영역 조정 동작에 대한 범위는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선에 기초할 수 있다.

상기 제 1 터치 입력은, 상기 외부 기기에 대한 스크린 정보를 선택하기 위한 터치 동작이 될 수 있고, 상기 스크린 정보는 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 되고 있는 상기 외부 기기에 대한 선택 가능한 스크린 정보 메뉴 항목에 포함되고, 상기 스크린 정보는 스크린 사이즈 정보와 스크린 타입 정보중 적어도 하나를 포함할 수 있다.

상기 제 2 위치 정보는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 객체의 윤곽선에 나타낼 수 있다.

상기 제 2 터치 입력은, 상기 객체가 상기 투명 디스플레이 기기의 상기 화면상에 보이는 상기 투명 디스플레이 기기의 상기 화면상의 위치를 나타내는 탭 기반 터치가 될 수 있다.

상기 제 2 터치 입력은, 상기 객체가 상기 투명 디스플레이 기기의 상기 화면상에 보이는 투명 디스플레이 기기의 상기 화면상에 닫힌 영역을 나타낼 수 있다.

상기 객체에 관한 정보는, 상기 객체의 타입과 동일한 타입을 갖는 적어도 하나의 다른 객체를 나타낼 수 있고, 상기 적어도 하나의 다른 객체의 상기 외부 기기의 상기 화면상에 디스플레이 위치는 상기 객체의 상기 외부 기기의 상기 화면상의 디스플레이 위치와 다를 수 있다.

상기 방법은, 상기 투명 디스플레이 기기와 상기 외부 기기간의 인터랙션에 기초하여 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 되고 있는 상기 정보를 편집하는 단계를 더 포함할 수 있다.

상기 과제들을 달성하기 위한 바람직한 실시 예에 따른 투명 디스플레이 기기는, 보이는 외부 기기의 제 1 위치 정보를 나타내는 터치 입력을 수신하고, 상기 외부 기기의 화면상에 디스플레이 되고 있는 객체의 제 2 위치 정보를 나타내는 제 2 터치 입력을 수신하도록 구성된 투명 디스플레이; 상기 외부 기기와 통신하도록 구성된 통신부; 및 상기 제 1 위치 정보와 상기 제 2 위치 정보에 기초한 상기 객체에 관한 정보를 상기 외부 기기로 요청하고, 상기 통신부를 통해, 상기 요청에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하고, 상기 수신된 정보를 상기 투명 디스플레이상에 디스플레이 하도록 구성된 프로세서를 포함할 수 있다.

상기 과제들을 달성하기 위한 바람직한 실시 예에 따른 투명 디스플레이 기기의 화면상에 정보를 디스플레이 방법은, 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 외부 기기의 화면상에 디스플레이 되고 있는 적어도 하나의 객체에 관한 정보 요청을 상기 투명 디스플레이 기기로부터 수신하는 단계; 상기 요청에 응답하여 상기 적어도 하나의 객체를 선택하는 단계; 및 상기 선택된 객체에 관한 정보를 상기 투명 디스플레이 기기로 전송하는 단계를 포함하고, 상기 객체에 관한 정보 요청은, 상기 투명 디스플레이 기기상의 제 1 터치 입력에 의해 나타내는 상기 외부 기기의 제 1 위치 정보 및 상기 투명 디스플레이 기기상에 제 2 터치 입력에 의해 나타내는 상기 외부 기기의 상기 화면상에 디스플레이 되고 있는 상기 객체의 제 2 위치 정보를 포함할 수 있다.

상기 과제들을 달성하기 위한 바람직한 실시 예에 따른 투명 디스플레이 기기상에 정보를 디스플레이 하는 방법을 실행하는 명령어들을 포함하는 프로그램이 기록된 비 일시적인 컴퓨터로 읽을 수 있는 기록 매체에 있어서, 상기 방법은, 상기 투명 디스플레이 기기상에 정보를 디스플레이 하는 방법들중 하나와 같이 수행될 수 있다.

도 1a 내지 도 1c는 바람직한 일 실시 예에 따른 정보 디스플레이 시스템의 구성도이다.
도 2는 바랍직한 일 실시 예에 따른 투명 디스플레이 기기에서의 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 3a 내지 도 3h는 바람직한 실시 예들에 따른 제 1 터치 입력의 일 예를 설명하기 위한 도면이다.
도 4a 내지 도 4e는 바람직한 실시 예들에 따른 제 1 터치 입력의 다른 예를 설명하기 위한 도면이다.
도 5a 내지 도 5e는 바람직한 실시 예에 따른 제 1 터치 입력의 다른 예를 설명하기 위한 도면이다.
도 6a 내지 도 6c는 바람직한 실시 예들에 따른 제 1 터치 입력, 제 2 터치 입력, 및 제 1 및 제 2 터치 입력에 따른 투명 디스플레이 기기상에 디스플레이 되고 있는 화면을 설명하는 도면이다.
도 7a 내지 도 7c는 바람직한 실시 예들에서 언급되는 제 1 터치 입력과 제 2 터치 입력 및 편집 과정을 설명하기 위한 화면의 예들이다.
도 8a 내지 도 8g는 바람직한 실시 예들에서 언급되는 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 화면의 예들이다.
도 9a 내지 도 9c는 투명 디스플레이 기기와 외부 기기가 동일한 사이즈를 갖는 경우에 바람직한 실시 예들에 따른 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 화면을 도시한 도면이다.
도 10a 내지 도 10d는 바람직한 실시 예들에 따른 제 1 터치 입력과 제 2 터치 입력의 예들을 도시한 도면이다.
도 11은 바람직한 다른 실시 예에 따른 투명 디스플레이 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 12는 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 13a 및 도 13b는 도 12에 도시된 투명 디스플레이 기기와 외부 기기간의 측면도이다.
도 14는 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 15는 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 16은 바람직한 실시 예에 따른 투명 디스플레이 기기의 기능 블록도이다.
도 17은 도 16에 도시된 투명 디스플레이부의 구성 예이다.
도 18은 바람직한 실시 예에 따른 투명 디스플레이 기기의 저장부에 저장되는 소프트웨어 계층을 설명하기 위한 도면이다.
도 19는 바람직한 실시 예에 따른 투명 디스플레이 기기의 기능 블록도의 다른 예이다.
도 20은 바람직한 실시 예에 따른 외부 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.
도 21은 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.

바람직한 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 바람직한 실시 예들을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 바람직한 실시 예들의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 바람직한 실시 예들을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명은 생략한다.

제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.

바람직한 실시 예들에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 바람직한 실시 예들을 한정하려는 의도가 아니다. 본 출원에서 사용한 용어는 바람직한 실시 예들에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나 이는 당 분야에 종사하는 기술자의 의도, 판례, 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 바람직한 실시 예들에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 바람직한 실시 예들에 걸친 내용을 토대로 정의되어야 한다.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 예를 들어 명세서 전반에서의 컨텐트는 컨텐츠를 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

명세서 전반에서 언급되는 객체(object)는 투명 디스플레이 기기의 외부 기기 또는 외부 기기의 화면에 디스플레이 되고 있는 구성 요소(component) 또는 정보를 의미한다. 예를 들어, 객체는 이미지, 이미지에 포함된 이미지, 아이콘(icon), 폴더 아이콘, 폴더 아이콘에 포함된 아이콘, 텍스트(text), 팝업 창(pop-up window), 어플리케이션 실행 창, 어플리케이션 실행 창에 포함된 컨텐트(content), 리스트(list), 리스트에 포함된 아이템(item), 컨텐트, 및 파일 등을 포함할 수 있으나 이로 제한되지 않는다. 객체의 예는 후술할 다양한 화면의 예들에서 구체적으로 언급될 것이다. 상술한 객체는 투명 디스플레이 기기의 외부 객체로 언급될 수 있다.

명세서 전반에서 언급되는 터치 입력은 사용자의 손가락 또는 터치 도구(touch tool)를 이용하는 터치 기반 제스처(gesture)를 통해 입력되는 사용자의 입력 정보를 의미한다. 터치 도구는 외부 입력 장치, 스타일러스(stylus), 또는 스타일러스 펜(stylus pen)으로 언급될 수 있다.

터치 기반 제스처는 다양하게 정의될 수 있다. 예를 들어 터치 기반 제스처는 탭(tap), 롱 탭(long tap), 터치 앤 홀드(touch and hold), 더블 탭(double tap), 드래그(drag), 터치 앤 드래그, 패닝(panning), 플릭(flick), 드래그 앤 드롭(drag and drop), 스윕(sweep), 스와이프(swipe) 등 터치 스크린에 대한 사용자의 터치 기반 동작(motion)을 포함하나 터치 기반 제스처는 이로 제한되지 않는다.

명세서 전반에서 언급되는 터치 입력은 터치 기반으로 나타내고자 하는 입력에 따라 카메라를 이용하여 촬영된 영상 기반의 제스처(gesture)로 대체될 수 있다. 예를 들어, 터치 입력이 외부 기기에서 디스플레이 되고 있는 객체에 대한 선택을 나타내는 입력인 경우에, 터치 입력은 카메라를 이용하여 촬영된 손의 동작에 따른 제스처 또는 동작에 기초한 입력으로 대체될 수 있다. 카메라는 이미지 센터 또는 광 센서 기반으로 구성될 수 있다.

명세서 전반에서 언급되는 터치 입력은 터치 기반으로 나타내고자 하는 입력에 따라 자연어 기반의 사용자 음성 신호로 대체될 수 있다. 예를 들어 터치 입력이 외부 기기에서 디스플레이 되고 있는 특정 문자 또는 이름을 포함하는 객체에 대한 선택을 나타내는 입력인 경우에, 터치 입력은 객체의 특정 문자 또는 이름을 표현하는 자연어 기반의 사용자 음성 신호로 대체될 수 있다.

이하, 바람직한 실시 예들을 첨부 도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

도 1a는 바람직한 일 실시 예에 따른 정보 디스플레이 시스템의 구성도이다.

도 1a를 참조하면, 정보 디스플레이 시스템은 투명 디스플레이 기기(100)와 외부 기기(110)를 포함한다. 그러나, 정보 디스플레이 시스템은 도 1a에 도시된 바로 한정되지 않는다. 즉, 정보 디스플레이 시스템은 도 1a에 도시된 구성 요소 외에 다른 구성 요소를 더 포함할 수 있다.

예를 들어, 도 1b에 도시된 바와 같이, 정보 디스플레이 시스템은 서버(120)를 더 포함할 수 있다. 이러한 경우에, 투명 디스플레이 기기(100)와 외부 기기(110)는 서버(120)를 통해 정보를 송수신할 수 있고, 투명 디스플레이 기기(100)는 서버로부터 외부 기기(110)에 대한 증강 현실 서비스(Augmented Reality Service)에 기초한 정보를 수신할 수 있다. 서버를 통한 통신 방식은 예를 들어 유선 또는 무선 인터넷이 있을 수 있으나 이로 제한되지 않는다. 서버는 클라우드 서버(cloud server), 정보 제공 서버, 및 서비스 서버중 적어도 하나를 포함할 수 있다. 서버는 증강 현실 서비스에 기초한 정보를 관리하고, 제공할 수 있다.

정보 디스플레이 시스템은 도 1c에 도시된 바와 같이 중계기(Access Point, 130)를 더 포함할 수 있다. 이러한 경우에 투명 디스플레이 기기(100)와 외부 기기(110)는 중계기(130)를 통해 정보를 송수신할 수 있다. 중계기(130)를 통한 통신 방식은 예를 들어, 인프라스트럭쳐 모드(infrastructure mode)의 무선 랜(wireless LAN) 통신 방식(또는 WiFi)이 있을 수 있으나 이로 제한되지 않는다.

정보 디스플레이 시스템이 도 1a에 도시된 바와 구성될 경우에, 투명 디스플레이 기기(100)와 외부 기기(110)는 기기간 직접 통신 방식으로 정보를 송수신할 수 있다. 기기간 직접 통신 방식은, 예를 들어, 와이파이 다이렉트(WiFi-direct) 통신과 같은 애드훅(Ad-Hoc)모드의 무선 랜 통신, 블루투스(Bluetooth) 통신, UWB(Ultra Wideband) 통신, 및 지그비(Zigbee) 통신 등의 근거리 무선 통신방식을 사용할 수 있으나 이로 제한되지 않는다.

즉, 투명 디스플레이 기기(100)와 외부 기기(110)는 유선으로 연결될 수 있다. 예를 들어, 투명 디스플레이 기기(100)와 외부 기기(110)는 USB(Universal Serial Bus) 또는 UART(Universal Asynchronous Receiver/Transmitter)를 통해 연결되어 데이터를 송수신할 수 있다. 기기간 직접 통신 방식은 M2M(Machine-to-Machine) 통신 방식 또는 D2D(Device-to-Device) 통신 방식 또는 P2P(Peer to Peer) 통신 방식으로 언급될 수 있다.

그러므로, 투명 디스플레이 기기(100)와 외부 기기(110)간의 통신은 정보 디스플레이 시스템의 구성 요소에 따라 기기간 직접 통신 방식, 중계기를 통한 통신 방식, 및 서버를 통한 통신 방식중 하나에 기초하여 수행되는 것으로 언급될 수 있으나 이로 제한되지 않는다.

투명 디스플레이 기기(100)와 외부 기기(110)는 NFC(Near Field Communication)와 같은 근거리 통신 방식으로 기기의 사이즈 정보, 기기의 스크린 정보, 기기의 소유자 정보, 다른 기기와 공유가 허락된 정보중 적어도 하나를 송수신할 수 있다.

기기의 사이즈 정보는 예를 들어 (가로×세로×두께)mm로 표현될 수 있으나 이로 제한되지 않는다. 스크린 정보는 스크린 사이즈 정보와 스크린 타입 정보 등을 포함할 수 있으나 이로 제한되지 않는다. 스크린 사이즈 정보는 예를 들어, A4, B5, 7인치, 5.5인치 등으로 표현될 수 있으나 이로 제한되지 않는다. 스크린 타입 정보는 스크린이 터치 스크린인지 비터치 스크린인지를 표현할 수 있으나 이로 제한되지 않는다. 예를 들어, 스크린 타입 정보는 스크린이 LCD 패널인지 AMLED 패널인지를 표현할 수 있다.

투명 디스플레이 기기(100)는 상술한 NFC와 같은 근거리 통신 방식으로 외부 기기(110)로부터 수신된 외부 기기(110)에 대한 정보를 증강 현실 서비스에 기초한 외부 기기(110)에 대한 정보로 디스플레이 할 수 있다. 예를 들어, 투명 디스플레이 기기(100)는 상술한 외부 기기(110)에 대한 정보를 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(110)의 인접한 디스플레이 영역에 디스플레이 할 수 있다. 상기 디스플레이 영역은 투명 디스플레이 기기(100)의 화면상의 한 영역이다. 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(100)는 투명 디스플레이 기기(100)의 화면을 통해 보이는 외부 기기(100)로 언급될 수 있다.

투명 디스플레이 기기(100)는 투명 디스플레이를 갖는 기기이다. 예를 들어 투명 디스플레이 기기(100)는 투명 디스플레이를 갖는 휴대폰, 투명 디스플레이를 갖는 스마트 폰(smart phone), 투명 디스플레이를 갖는 노트북 컴퓨터, 투명 디스플레이를 갖는 태블릿 PC, 투명 디스플레이를 갖는 핸드헬드 PC, 투명 디스플레이를 갖는 전자북 단말기, 투명 디스플레이를 갖는 디지털 방송용 단말기, 투명 디스플레이를 갖는 PDA(Personal Digital Assistants), 투명 디스플레이를 갖는 PMP(Portable Multimedia Player), 투명 디스플레이를 갖는 네비게이션 기기, 투명 디스플레이를 갖는 스마트 TV, 투명 디스플레이를 갖는 CE(Consumer Electronics) 기기(예컨대, 투명 디스플레이 패널을 갖는 냉장고, 투명 디스플레이 패널을 갖는 에어컨, 투명 디스플레이 패널을 갖는 식기 세척기 등), 투명 디스플레이를 갖는 iOS 호환 가능한 기기 등이 될 수 있으나 이로 제한되지 않는다. 이는 투명 디스플레이가 스마트 창뿐 아니라 고부가가치 유리, 기능성 자동차 부품인 유리, 자동차 대쉬보드(dashboard), 네비케이터(navigator), 보안 전자 기기, 태양 전지, 군용 전자 기기, 게임기, 장난감, 쇼 윈도우 등 다양한 분야에 적용될 수 있기 때문이다. 투명 디스플레이 기기(100)의 화면은 투명 디스플레이상의 화면으로 언급될 수 있다.

투명 디스플레이 기기(100)는 애플리케이션 실행 기능, 통신 기능, 미디어 플레이어 기능, 웹 브라우징 기능, 워드 프로세싱 기능, 이메일 전송 기능, 메신저 기능, 및/또는 데이터 저장 기능 등을 제공할 수 있으나 이로 제한되지 않는다.

투명 디스플레이 기기(100)는 터치 입력을 기반으로 투명 디스플레이 기기(100)를 통해 보이고, 외부 기기(110)에 디스플레이 되고 있는 적어도 하나의 객체에 관한 정보를 요청한다. 외부 기기(110)로부터 객체에 관한 정보가 수신되면, 투명 디스플레이 기기(100)는 이를 디스플레이 한다.

외부 기기(110)는 투명 디스플레이 기기(100)를 통해 또는 투명 디스플레이 기기(100)의 화면을 통해 또는 투명 디스플레이 기기(100)의 투명 디스플레이를 통해 보이는 기기이다. 외부 기기(110)는 다른 기기로 언급될 수 있다. 외부 기기(110)는 투명 디스플레이를 갖지 않는 기기를 포함한다. 예를 들어, 외부 기기(110)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터, 태블릿 PC, 핸드헬드 PC, 전자북 단말기, 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 기기, 스마트 TV, CE(Consumer Electronics) 기기(예컨대, 디스플레이 패널을 갖는 냉장고, 에어컨, 식기 세척기 등), iOS 호환 가능한 기기 등이 될 수 있으나 이로 제한되지 않는다. 즉, 외부 기기(110)는 투명 디스플레이를 갖는 기기를 포함할 수 있다.

외부 기기(110)는 애플리케이션 실행 기능, 통신 기능, 미디어 플레이어 기능, 웹 브라우징 기능, 워드 프로세싱 기능, 이메일 전송 기능, 메신저 기능, 및/또는 데이터 저장 기능 등을 제공할 수 있으나 이로 제한되지 않는다.

투명 디스플레이 기기(100)로부터 디스플레이 되고 있는 적어도 하나의 객체에 대한 정보가 요청되면, 외부 기기(110)는 요청된 객체를 선택하고, 선택된 객체에 관한 정보를 투명 디스플레이 기기(100)로 전송한다.

도 2는 바람직한 일 실시 예에 따른 투명 디스플레이 기기(100)에 의해 수행되는 정보 디스플레이 방법을 설명하기 위한 흐름도이다.

단계 S201에서, 투명 디스플레이 기기(100)는 제 1 터치 입력과 제 2 터치 입력을 수신한다. 제 1 터치 입력은 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(110)에 대한 기준 정보를 나타낸다. 기준 정보는 투명 디스플레이 기기(100)에서 제 2 터치 입력에 의해 선택되는 객체의 외부 기기(110)상에서의 디스플레이 위치를 검출하기 위해 이용된다. 상기 기준 정보는 상기 외부 기기의 제 1 위치 정보로서 언급될 수 있다.

도 3a 내지 도 3h는 제 1 터치 입력을 설명하기 위한 화면의 예들이다. 도 3a 내지 도 3h는 투명 디스플레이 기기(100)의 사이즈가 외부 기기(110)의 사이즈보다 크고, 도 3a에 도시된 바와 같이 투명 디스플레이 기기(100)를 통해 외부 기기(110)가 보이는 경우이다. 도 3a 내지 도 3h의 경우에 제 1 터치 입력을 감지한 결과를 투명 디스플레이 기기(100)상에 디스플레이 할 수 있으나 디스플레이 하지 않을 수 있다.

도 3b는 제 1 터치 입력이 투명 디스플레이 기기(100)에서 투과되어 보이는 외부 기기(110)의 윤곽선을 따라 그리는 것이다. 외부 기기(110)의 윤곽선은 외부 기기(110)의 화면의 경계(boundary)로서 언급될 수 있고, 제 1 터치 입력은 상기 외부 기기(110)의 화면의 경계를 알아 볼 수 있는 제 1 입력으로 언급될 수 있다. 도 3b에 도시된 제 1 터치 입력은 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)의 S 지점을 터치한 상태에서 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작이 E 지점까지 수행된다. S 지점은 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작의 시작점(start point)을 의미한다. E 지점은 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작의 끝점(End point)을 의미한다. S 지점과 E 지점은 동일한 디스플레이 위치(또는 xy좌표)를 가질 수 있다. 그러나, S 지점과 E 지점은 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 따라 닫힌 영역(closed area)이 설정되도록 인접한 디스플레이 위치일 수 있다.

도 3b의 경우에, S 지점은 외부 기기(110)의 윤곽선상의 최좌상측 모서리이다. 그러나, S 지점은 외부 기기(110)의 윤곽선 상의 임의의 하나의 지점이 될 수 있으므로, 도 3b에 도시된 바로 한정되지 않는다. E 지점은 S 지점에 따라 결정된다.

도 3c 및 도 3d에 도시된 제 1 터치 입력은 투명 디스플레이 기기(100)상의 제 1 지점과 제 2 지점에서 독립적인 터치 동작에 기초한 예이다. 도 3c 및 도 3d에서 제 1 지점과 제 2 지점은 투명 디스플레이 기기(100)에서 투과되어 보이는 외부 기기(110)의 윤곽선에 기초한 대각선상의 지점이다.

도 3c를 참조하면, 제 1 지점이 외부 기기(110)의 윤곽선상의 최좌상측 지점(P1)이고, 제 2 지점이 외부 기기(110)의 윤곽선상의 최우하측 지점(P2)인 경우이다. P1 지점과 P2 지점이 독립적으로 터치되기 때문에, 투명 디스플레이 기기(100)는 P1 지점과 P2 지점의 투명 디스플레이 기기(100)상에서의 xy좌표 정보에 기초하여 투명 디스플레이 기기(100)에서 투과되어 보이는 외부 기기(110)의 윤곽선을 추적할 수 있다. 즉, P1 지점의 (x, y) 좌표 정보와 P2 지점의 (x, y) 좌표 정보에 기초하여 터치되지 않은 윤곽선상의 최우상측 지점과 최좌하측 지점의 (x, y) 좌표 정보를 검출하고, 각 지점을 연결하는 방법으로 외부 기기(110)의 윤곽선을 추적할 수 있다.

도 3d를 참조하면, 제 1 지점이 외부 기기(110)의 윤곽선상의 최좌하측 지점(P3)이고, 제 2 지점이 외부 기기(110)의 윤곽선상의 최우상측 지점(P3)인 경우이다. P3 지점과 P4 지점이 각각 터치됨에 따라 투명 디스플레이 기기(100)는 P3 지점과 P4 지점의 투명 디스플레이 기기(100)상에서의 xy좌표 정보에 기초하여 투명 디스플레이 기기(100)에서 투과되어 보이는 외부 기기(110)의 윤곽선을 추적할 수 있다. 윤곽선 추적은 상술한 도 3c에서와 같이 수행될 수 있다.

도 3e 내지 도 3h는 제 1 터치 입력이 투명 디스플레이 기기(100)상의 제 1 지점과 제 2 지점을 연결하는 터치 앤 드래그(touch and drag) 동작에 기초한 예들이다. 도 3e 내지 도 3h에서 제 1 지점과 제 2 지점은 투명 디스플레이 기기(100)에서 투과되어 보이는 외부 기기(110)의 윤곽선에 기초한 대각선상의 지점이다. 도 3e 내지 도 3h의 경우에 제 1 지점은 시작점(S)을 의미하고, 제 2 지점은 끝점(E)을 의미할 수 있다.

도 3e를 참조하면, S지점이 외부 기기(110)의 윤곽선상의 최좌상측이고, E 지점이 외부 기기(110)의 윤곽선상의 최우하측인 경우이다. S 지점을 터치한 상태에서 E 지점으로 터치 앤 드래그 동작이 수행됨에 따라 투명 디스플레이 기기(100)는 외부 기기(110)의 윤곽선을 추적할 수 있다. 즉, 도 3e에 도시된 바와 같이 터치 앤 드래그에 따른 터치 지점이 t1일 때, S지점의 (x, y) 좌표 정보와 t1 지점의 (x, y) 좌표 정보에 기초하여 터치되지 않은 윤곽선상의 (t2) 지점과 (t3) 지점의 (x, y) 좌표 정보를 검출하고, S지점, (t1) 지점, (t2) 지점, 및 (t3)지점의 (x, y) 좌표 정보에 기초하여 각 지점을 연결하는 방법으로 외부 기기(110)의 윤곽선을 추적할 수 있다.

투명 디스플레이 기기(100)는 드래그 동작에 따른 터치 위치 변경을 나타내기 위하여 도 3e에 도시된 화살표 또는 블록 설정을 현재의 터치 위치 기반으로 디스플레이 할 수 있다. E 지점에서 터치 앤 드래그 동작이 종료되면, 투명 디스플레이 기기(110)는 상술한 화살표 또는 블록 설정 디스플레이를 종료하고, 외부 기기(110)의 윤곽선을 디스플레이 할 수 있으나 화살표 또는 블록 설정 디스플레이 상태를 유지할 수 있다.

도 3f는 상술한 터치 앤 드래그 동작을 위한 시작점(S)이 외부 기기(110)의 윤곽선상의 최우상측이고, 끝점(E)이 외부 기기(110)의 윤곽선상의 최좌하측인 경우이다. 도 3g는 상술한 터치 앤 드래그 동작을 위한 시작점(S)이 외부 기기(110)의 윤곽선 상의 최좌하측이고, 끝점(E)이 외부 기기(110)의 윤곽선상의 최우상측인 경우이다. 도 3h는 상술한 터치 앤 드래그 동작을 위한 시작점(S)이 외부 기기(110)의 윤곽선 상의 최우하측이고, 끝점(E)이 외부 기기(110)의 윤곽선상의 최좌상측인 경우이다.

도 4a 내지 도 4e는 제 1 터치 입력을 설명하기 위한 화면의 다른 예들이다. 도 4a 내지 도 4e는 투명 디스플레이 기기(100)의 사이즈가 외부 기기(110)의 사이즈보다 크고, 도 4a에 도시된 바와 같이 투명 디스플레이 기기(100)에 외부 기기(110)가 투과되어 보이는 경우이다. 도 4a 내지 도 4e의 경우에, 제 1 터치 입력을 감지한 결과를 투명 디스플레이 기기(100)상에 디스플레이 할 수 있으나 디스플레이 하지 않을 수 있다.

도 4a 내지 도 4e에서의 제 1 터치 입력이 투명 디스플레이 기기(100)에 디스플레이 되고 있는 가이드 정보(guide information)에 대한 영역을 조정하기 위한 터치 기반의 동작에 기초하고, 가이드 정보에 대한 터치 기반의 영역 조정범위는 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)의 윤곽선에 기초한다.

가이드 정보는, 예를 들어, 카메라 초점 영역 정보가 될 수 있다. 가이드 정보는 투명 디스플레이 기기(100)의 사용자의 요청에 따라 디스플레이 될 수 있다. 예를 들어, 사용자의 요청은 바람직한 실시 예에 따른 정보 디스플레이 방법을 실행하기 위한 가이드 정보 디스플레이 요청 또는 정보 디스플레이 방법 실행 요청을 포함할 수 있다.

도 4a에 도시된 바와 같이 외부 기기(110)가 투명 디스플레이 기기(100)에 투과되어 보일 때, 투명 디스플레이 기기(100)에서 도 4b에 도시된 바와 같은 형태의 가이드 정보(G1)를 디스플레이 한다. 가이드 정보(G1)는 투명 디스플레이 기기(100)의 사용자의 명령에 따라 투명 디스플레이 기기(100)에 디스플레이 될 수 있다. 가이드 정보의 4개의 지점(P5, P6, P7, P8)을 터치한 상태에서 외부 기기(110)의 윤곽선상의 4 모서리 방향으로 가이드 정보(G1)의 영역 조정 동작을 수행하면, 도 4c에 도시된 바와 같이 가이드 정보(G1)의 영역이 조정된 가이드 정보가 투명 디스플레이 기기(100)상에 디스플레이 된다.

이에 따라 투명 디스플레이 기기(100)는 가이드 정보(G1)의 4개의 지점(P5, P6, P7, P8)의 조정된 (x. y) 좌표 값에 따라 외부 기기(110)의 윤곽선을 추적할 수 있다. 윤곽선 추적은 각 지점의 변경된 (x, y) 좌표 값을 연결하는 방식으로 수행될 수 있으나 이로 제한되지 않는다. 각 지점의 변경된 (x, y) 좌표 값은 각 지점의 원 (x, y) 좌표 값을 터치한 후 드래그 동작에 따른 변위 량을 가산하여 얻을 수 있으나 이로 제한되지 않는다. 즉, 가이드 정보(G1)의 4개의 지점(P5, P6, P7, P8)을 터치한 후, 각 지점에 대한 조정을 원하는 지점을 터치하는 투 터치에 따라 각 지점의 원 (x, y) 좌표 값을 두 번째 터치된 지점의 (x, y) 좌표 값으로 업데이트할 수 있다.

도 4d와 도 4e는 가이드 정보(G1)의 영역 조정 동작에 대한 다른 화면의 예이다. 도 4d를 참조하면, 가이드 정보(G1)의 좌상측 지점(P5)을 터치한 상태에서 외부 기기(110)의 윤곽선에서 최좌상측 지점까지 이동시킨다. 외부 기기(110)의 윤곽선에서 최좌상측 지점은 가이드 정보(G1)의 지점(P5)에 대응되는 외부 기기(110)의 모서리 지점이다.

다음, 가이드 정보(G1)의 우하측 지점(P8)을 터치한 상태에서 외부 기기(110)의 윤곽선에서 최우하측 지점까지 이동함에 따라 가이드 정보(G1)의 좌상측 지점(P5)의 가이드 정보를 제외한 나머지 지점(P6, P7, P8)의 가이드 정보가 이동되면서 도 4c에 도시된 바와 같이 가이드 정보(G1)의 디스플레이 상태가 변경된다.

도 4d, 도 4e, 도 4c에 도시된 예는, 가이드 정보(G1)의 하나의 지점을 터치한 상태에서 대응되는 외부 기기(110)의 모서리 지점으로 이동시키고, 가이드 정보(G1)중에서 상술한 하나의 지점에 대각선에 위치한 지점을 터치한 상태에서 대응되는 외부 기기(110)의 윤곽선의 모서리 지점까지 이동시켜 가이드 정보(G1)의 디스플레이 위치를 변경 또는 디스플레이 사이즈를 조정하는 것으로 해석되어야 한다.

상술한 가이드 정보(G1)에서의 하나의 지점과 대각선 지점은 도 4d 및 도 4e에 도시된 바로 제한되지 않는다. 예를 들어, 가이드 정보(G1)의 P6 지점을 터치하여 대응되는 외부 기기(110)의 윤곽선 모서리 지점으로 이동시키고, 대각선에 위치한 가이드 정보(G1)의 P7 지점을 터치하여 가이드 정보(G1)의 나머지 지점(P5, P7, P8)이 각각 대응되는 외부 기기(110)의 윤곽선의 모서리 지점으로 이동시킬 수 있다.

도 5a 내지 도 5e는 투명 디스플레이 기기(100)가 외부 기기(110)보다 작은 경우에, 제 1 터치 입력에 대한 화면의 예들이다. 즉, 도 5a에 도시된 바와 같이 투명 디스플레이 기기(100)가 외부 기기(110)보다 작은 경우에, 제 1 터치 입력은 도 5b 내지 도 5e에 도시된 바와 같이 투명 디스플레이 기기(100)에 겹쳐진 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초할 수 있다. 이 때, 윤곽선을 따라 그리는 터치 동작이 수행되는 방향은 하나의 방향으로 제한되지 않는다.

도 5a에 도시된 바와 같이 투명 디스플레이 기기(100)는 외부 기기(110)보다 더 작을 수 있다. 따라서 선택하고자 하는 객체가 외부 기기(110)의 스크린의 중앙에 인접한 위치에 디스플레이 되고 있어 도 5b 내지 도 5e에 도시된 제 1 터치 입력이 적용되지 않는 경우에, 투명 디스플레이 기기(100)는 카메라의 줌 아웃(zoom out) 기능을 이용하여 외부 기기(110)의 사이즈를 축소시켜 제 1 터치 입력 및 제 2 터치 입력을 수신할 수 있다. 이 때, 투명 디스플레이 기기(100)는 줌 아웃 배율에 따라 외부 기기(110)의 스크린 사이즈를 검출할 수 있다.

한편, 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)가 도 6a에 도시된 바와 같을 때, 제 1 터치 입력은 시작점(S)을 터치하고 투과되어 보이는 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작을 끝 점(E)까지 수행함에 따라 수신될 수 있다.

또한, 제 1 터치 입력은 후술할 도 9b에 도시된 메뉴(910)에 포함된 외부 기기(110)에 대한 스크린 정보를 선택하기 위한 터치 동작에 기초할 수 있다. 스크린 정보는 상술한 바와 같이 외부 기기(110)의 스크린 사이즈 정보와 외부 기기(110)의 스크린 타입 정보중 적어도 하나를 포함할 수 있다.

스크린 사이즈 정보는, 예를 들어, 도 9b에 도시된 바와 같이 투명 디스플레이 기기(100)의 스크린 사이즈와 외부 기기(110)의 스크린 사이즈가 동일하다는 정보, 및 A4, B5, 7인치, 4인치 등 외부 기기(110)에 대한 특정한 사이즈 정보로 표현될 수 있으나 이로 제한되지 않는다. 제 1 터치 입력은 이와 같은 스크린 사이즈 정보중에서 해당되는 스크린 사이즈 정보를 선택하기 위한 터치 동작으로 수행될 수 있다.

투명 디스플레이 기기(100)의 스크린 사이즈와 외부 기기(110)의 스크린 사이즈가 다른 경우에, 투명 디스플레이 기기(100)는 제 1 터치 입력에 따른 투명 디스플레이 기기(100)상의 (x, y) 좌표 정보와 제 2 터치 입력에 따른 투명 디스플레이 기기(100)상의 (x, y) 좌표 정보를 외부 기기(110)의 스크린 사이즈에 따른 정보로 변경할 수 있다.

예를 들어, 투명 디스플레이 기기(100)가 4인치 스크린 사이즈(길이(length),폭(width), 면적(area) 등)를 갖고, 외부 기기(110)가 7인치 스크린 사이즈를 가질 때, 투명 디스플레이 기기(100)는 4인치 스크린 사이즈의 좌표 정보를 7인치 스크린 사이즈의 좌표 정보로 컨버트(convert)하는 기능을 이용하여 제 1 터치 입력에 대한 투명 디스플레이 기기(100)에서의 좌표 정보와 제 2 터치 입력에 대한 투명 디스플레이 기기(100)에서의 좌표 정보를 7인치 스크린 사이즈에서의 좌표 정보로 바꿀 수 있다. 이 때, 투명 디스플레이 기기(100)는 제 1 터치 입력에 따른 투명 디스플레이 기기(100)상의 (x, y) 좌표 정보와 제 2 터치 입력에 따른 투명 디스플레이 기기(100)상의 (x, y) 좌표 정보간의 관계 정보(예를 들어, 좌표 정보간의 차이 정보)를 이용할 수 있다.

또한, 투명 디스플레이 기기(100)가 10인치의 스크린 사이즈를 갖고, 외부 기기(110)가 4인치의 스크린 사이즈를 가질 때, 투명 디스플레이 기기(100)는 10인지 스크린 사이즈의 좌표 정보를 4인치 스크린 사이즈의 좌표 정보로 컨버트하는 기능을 이용하여 제 1 터치 입력에 대한 투명 디스플레이 기기(100)에서의 좌표 정보와 제 2 터치 입력에 대한 투명 디스플레이 기기(100)에서의 좌표 정보를 4인지 스크린 사이즈에서의 좌표 정보로 바꿀 수 있다.

상술한 스크린 사이즈 좌표 정보를 컨버트하는 기능은 외부 기기(110)에 포함될 수 있다. 외부 기기(110)에 좌표 정보를 컨버트 하는 기능이 포함된 경우에, 투명 디스플레이 기기(100)는 제 1 터치 입력에 따른 투명 디스플레이 기기(100)의 (x, y) 좌표 정보, 제 2 터치 입력에 따른 투명 디스플레이 기기(100)의 (x, y) 좌표 정보, 및 투명 디스플레이 기기(100)의 스크린 사이즈 정보를 외부 기기(110)로 전송할 수 있다.

스크린 타입 정보는 외부 기기(110)의 스크린 타입이 터치 방식인지 비터치 방식인지를 선택할 수 있는 정보를 포함할 수 있다. 만약 외부 기기(110)의 스크린이 터치 방식인 경우에, 외부 기기(110)는 투명 디스플레이 기기(100)와 외부 기기(110)가 겹쳐지는 영역을 인식할 수 있다. 이에 따라 제 1 터치 입력에는 외부 기기(100)의 윤곽선과 관련된 정보가 포함되지 않고, 외부 기기(110)의 스크린이 터치 방식이라는 정보만 포함될 수 있다.

한편, 도 2의 단계 S201에서의 제 2 터치 입력은 외부 기기(110)에 디스플레이 되고 있는 적어도 하나의 객체를 선택하기 위한 입력이다. 상기 외부 기기(110)에 디스플레이 되고 있는 상기 적어도 하나의 객체는 투명 디스플레이 기기(100)를 통해 보인다. 상기 외부 기기(110)에 디스플레이 되고 있는 상기 적어도 하나의 객체를 선택하기 위한 입력은 상기 투명 디스플레이 기기(100)를 통해 보이는 상기 외부 기기(110)의 화면의 적어도 하나의 위치를 선택하는 입력으로 언급될 수 있다.

제 2 터치 입력은 투명 디스플레이 기기(100)에서 투과되어 보이는 객체의 윤곽선의 임의 지점을 터치하고, 객체의 윤곽선을 따라 그리는 터치 동작 및 투명 디스플레이 기기(100)에 투과되어 보이는 객체(예를 들어, 텍스트) 따라 쓰기 터치 동작 중 적어도 하나에 기초할 수 있다. 제 2 터치 입력은 외부 기기(110)의 화면에 디스플레이 되고 있는 객체의 위치 정보(또는 제 2 위치 정보)를 나타내는 투명 디스플레이 기기(100)의 화면상에 터치 입력으로 언급될 수 있다. 상기 제 2 터치 입력은 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(110)의 화면의 위치를 선택하는 입력으로서 언급될 수 있다. 외부 기기(110)의 화면의 위치에 상기 객체가 디스플레이 될 수 있다. 상기 위치는 투명 디스플레이 기기(100)를 통해 볼 수 있는 상기 외부 기기(110)의 화면의 좌표 정보 및 상기 투명 디스플레이 기기(100)를 통해 볼 수 있는 상기 외부 기기(110)의 화면의 영역중 하나를 포함할 수 있다.

도 6a 내지 도 6c는 바람직한 실시 예에 따른 제 2 터치 입력을 설명하기 위한 화면의 예들이다.

도 6a는 객체의 윤곽선을 따라 그리는 터치 동작에 기초한 제 2 터치 입력과 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초한 제 1 터치 입력을 포함하는 화면의 예이다.

즉, 도 6a에 도시된 화면은 S 지점을 터치하여 E 지점까지 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 의해 제 1 터치 입력이 수신되고, 아이콘의 윤곽선을 따라 그리는 터치 동작에 의해 제 2 터치 입력이 수신되는 경우이다. 아이콘의 윤곽선을 따라 그리는 터치 동작은 S1 지점을 터치하여 E1 지점까지 객체인 아이콘의 윤곽선을 따라 그리는 터치 동작에 의해 제 2 터치 입력이 수신되는 경우이다. 아이콘의 윤곽선을 따라 그리는 터치 동작의 시작점과 끝점은 도 6a에 도시된 바로 제한되지 않는다. 즉, 시작점은 객체인 아이콘의 윤곽선의 임의 지점이 되고, 끝점은 제 1 터치 입력에서 설명한 바와 같이 시작점에 따라 결정된다. 도 6a에서, 상기 외부 기기(110)상에 디스플레이 되고 있는 상기 객체는 아이콘이고, 상기 외부 기기(110)상에 디스플레이 되고 있는 상기 객체는 후술한 바와 같이 다른 타입의 객체가 될 수 있다.

또한, 객체의 윤곽선을 따라 그리는 터치 동작의 시작점과 끝점 사이에 터치 동작은 연속적으로 수행될 수 있으나 비연속적으로 수행될 수 있다. 터치 동작이 비연속적으로 수행될 경우에, 객체의 윤곽선을 따라 그리는 터치 동작의 끝점의 위치는 변경될 수 있다.

예를 들어, 도 6a의 객체에 대한 윤곽선을 따라 그리는 터치 동작이 S1 시작점에서 시작하여 객체의 최좌하측 지점에서 터치 동작을 멈추고, 다시 S1 시작점 또는 E1 끝점에서 터치 동작을 시작하여 객체의 최좌하측 지점까지 터치 동작을 수행할 수 있다. 이러한 경우에, 끝점은 최좌하측 지점이 되고, E1 끝점은 터치 동작에 따라 윤곽선을 연결하는 연결점으로 표현될 수 있다. 터치 동작이 멈추는 윤곽선 상의 지점은 상술한 바로 제한되지 않는다. 즉, 터치 동작이 멈추는 윤곽선 상의 지점은 객체의 윤곽선 상의 임의 하나의 지점으로 정의될 수 있고, 복수개의 지점이 될 수 있다.

도 6b는 객체(텍스트) 따라 쓰기 터치 동작에 기초하여 제 2 터치 입력을 수신하는 경우이다. 즉, 도 6b는 알파벳 문자 P를 쓰기 위한 터치 동작에 기초한 제 2 터치 입력의 경우이다. 예를 들어, 도 6a에 외부 기기(110)상에 디스플레이 되고 있는 상기 아이콘은 상기 객체로 구성되고, 상기 알파벳 문자 P는 도 6b에 외부 기기(110)상에 디스플레이 되고 있는 객체이다. 객체 따라 쓰기 터치 동작에 기초한 제 2 터치 입력은 텍스트의 임의 지점을 터치하고, 따라 쓰기 터치 동작을 수행할 수 있다. 예를 들어, (601)지점을 터치한 후, 화살표 방향으로 객체(텍스트) 따라 쓰기 터치 동작이 수행될 수 있다. 그러나, 객체 따라 쓰기 터치 동작의 시작점은 도 6b에 도시된 바로 제한되지 않고, 상술한 바와 같이 객체의 임의 지점이 될 수 있고, 객체 따라 쓰기 터치 동작 역시 연속적으로 수행될 수 있으나 비연속적으로 수행될 수 있다. 객체 따라 쓰기 터치 동작이 비연속적으로 수행될 경우에, 시작점과 끝점 사이에 상술한 바와 같은 적어도 하나의 연결점이 포함될 수 있다.

도 7a 및 도 7b는 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 다른 화면의 예로서, 투명 디스플레이 기기(100)의 스크린 사이즈가 외부 기기(110)의 스크린 사이즈보다 큰 경우이다. 즉, 도 7a에 도시된 바와 같이 투명 디스플레이 기기(100)에 외부 기기(110)가 투과되어 보일 때, 제 1 터치 입력은 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 외부 기기(110)상에 디스플레이 되고 있는 객체의 윤곽선을 따라 그리는 터치 동작에 기초한 경우이다.

도 8a 내지 도 8g는 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 또 다른 화면의 예로서, 투명 디스플레이 기기(100)가 외부 기기(110)보다 적은 경우이다. 도 8a 내지 도 8g는 외부 기기(110)에 디스플레이 되는 객체에 대해 투명 디스플레이 기기(100)와 외부 기기(110)간의 겹치는 위치를 변경하여 조각 맞추기 하는 예이다. 따라서, 도 8a 내지 도 8g의 경우에, 투명 디스플레이 기기(100)는 제 2 터치 입력을 감지한 정보를 투명 디스플레이 기기(100)상에 디스플레이 한다.

즉, 외부 기기(110)에 디스플레이 되고 있는 화면이 도 8a에 도시된 바와 같을 때, 도 8b에 도시된 바와 같이 투명 디스플레이 기기(100)가 외부 기기(110)에 겹쳐지고, 제 1 터치 입력은 (801)과 같이 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 (802)와 같이 객체의 윤곽선을 따라 그리는 터치 동작에 기초하여 수신된다. 이 때, 제 2 터치 입력을 감지한 결과 정보(802)는 투명 디스플레이 기기(100)상에 디스플레이 된다.

투명 디스플레이 기기(100)는 도 8b에서의 제 1 터치 입력에 따른 투명 디스플레이 기기(100)에서의 (x, y) 좌표 정보와 제 2 터치 입력에 따른 투명 디스플레이 기기(100)에서의 (x, y) 좌표 정보간의 관계 정보를 검출하고, 저장한다. 투명 디스플레이 기기(100)에서 검출된 관계 정보는 제 1 터치 입력에 따라 얻어진 투명 디스플레이 기기(100)상에서의 (x, y)좌표 정보들과 제 2 터치 입력에 따라 얻어진 투명 디스플레이 기기(100)상에서의 (x, y)좌표 정보들간의 차이 값을 포함할 수 있다. 상술한 제 1 터치 입력에 따른 (x, y) 좌표 정보들과 제 2 터치 입력에 따른 (x, y) 좌표 정보들 및 상술한 관계 정보에 따라 외부 기기(110)는 도 8b에서 투명 디스플레이 기기(100)가 선택한 객체를 인식할 수 있다.

예를 들어, 제 1 터치 입력(801)에 의해 얻어진 좌표 정보가 (x(1), y(1))부터 (x(1+m), y(1+m))까지이고, 제 2 터치 입력(802)에 의해 얻어진 좌표 정보가 (x(i), y(i))부터 x((i+j), y(i+j))까지이고, 제 1 터치 입력에 의해 얻어진 좌표 정보의 개수와 제 2 터치 입력에 의해 얻어진 좌표 정보의 개수가 동일할 경우에, 투명 디스플레이 기기(100)는 (x(1)-x(i), y(1)-y(i))부터 (x(1+m)-x(i+j), y(1+m)-y(i+j))까지의 관계 정보를 얻을 수 있다. 여기서 m, i, 및 j는 2이상의 자연수이다.

그러나, 제 1 터치 입력에 의해 얻어진 투명 디스플레이 기기(100)에서의 좌표 정보의 수와 제 2 터치 입력에 의해 얻어진 투명 디스플레이 기기(100)에서의 좌표 정보의 수는 다를 수 있다. 제 1 터치 입력에 의해 얻어진 투명 디스플레이 기기(100)에서의 좌표 정보의 수와 제 2 터치 입력에 의해 얻어진 투명 디스플레이 기기(100)에서의 좌표 정보의 수가 다를 경우에, 투명 디스플레이 기기(100)는 제 1 터치 입력에 의해 얻어진 좌표 정보와 제 2 터치 입력에 의해 얻어진 좌표 정보를 각각 샘플링하여 상술한 관계 정보를 얻을 수 있다. 샘플링 대상은 디스플레이 위치에 따라 결정될 수 있다.

다음, 도 8c에 도시된 바와 같이 투명 디스플레이 기기(100)가 외부 기기(110)에 겹칠 때, 제 1 터치 입력은 803과 같이 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 804와 같이 객체의 윤곽선을 따라 그리는 터치 동작에 기초하여 수신된다. 이 때, 제 2 터치 입력을 감지한 결과 정보 (804)는 투명 디스플레이 기기(100)상에 디스플레이 된다.

이에 따라 투명 디스플레이 기기(100)상에 디스플레이 되는 객체의 이미지는 도 8c에 도시된 바와 같이 도 8b에서의 제 2 터치 입력을 감지한 결과 정보(802)를 포함하는 이미지를 가질 수 있다. 투명 디스플레이 기기(100)는 도 8c에서의 제 1 터치 입력과 제 2 터치 입력에 의한 좌표 정보들 및 좌표 정보들간의 관계 정보를 도 8b에서 설명한 바와 같이 검출하고 저장한다. 이 때, 투명 디스플레이 기기(100)는 도 8b에서 검출된 좌표 정보들 및 좌표 정보들간의 관계 정보와 도 8c에서 검출된 좌표 정보들 및 좌표 정보들간의 관계 정보가 서로 다른 프로세서에 의해 검출된 것이라는 것이 구별되도록 저장한다.

도 8d에 도시된 바와 같이 투명 디스플레이 기기(100)가 외부 기기(110)에 겹칠 때, 제 1 터치 입력은 805와 같이 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 806과 같이 객체의 윤곽선을 따라 그리는 터치 동작에 기초하여 수신된다. 이 때, 제 2 터치 입력은 객체의 윤곽선의 내부를 채우는 터치 동작을 더 수행할 수 있다. 제 2 터치 입력을 감지한 결과 정보(806)는 투명 디스플레이 기기(100)상에 디스플레이 된다. 이에 따라 투명 디스플레이 기기(100)상에 디스플레이 되는 객체의 이미지는 도 8b 및 도 8c에서의 제 2 터치 입력을 감지한 결과 정보를 포함하는 이미지를 가질 수 있다.

투명 디스플레이 기기(100)는 도 8d에서의 제 1 터치 입력과 제 2 터치 입력에 의한 투명 디스플레이 기기(100)에서의 좌표 정보들과 좌표 정보들간의 관계 정보를 도 8b에서 설명한 바와 같이 검출하고 저장한다. 저장할 때, 투명 디스플레이 기기(100)는 검출된 좌표 정보들과 좌표 정보들간의 관계 정보가 도 8b 및 도 8c에서 얻은 좌표 정보들과 좌표 정보들간의 관계 정보와 다른 단계에서 얻어진 정보라는 것을 알 수 있도록 저장한다.

도 8e에 도시된 바와 같이 투명 디스플레이 기기(100)와 외부 기기(110)가 겹칠 때, 제 1 터치 입력은 807과 같이 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 808과 같이 객체의 윤곽선을 따라 그리는 터치 동작에 기초하여 수신된다. 이 때 제 2 터치 입력은 객체의 윤곽선 내부를 채우는 터치 동작을 더 수행할 수 있다. 제 2 터치 입력을 감지한 결과 정보(808)는 투명 디스플레이 기기(100)상에 디스플레이 된다. 이에 따라 투명 디스플레이 기기(100)상에 디스플레이 되는 객체의 이미지는 도 8b, 도 8c, 및 도 8d에서의 제 2 터치 입력을 감지한 결과 정보들을 모두 포함한 이미지를 갖는다.

투명 디스플레이 기기(100)는 도 8e에서의 제 1 터치 입력(807)과 제 2 터치 입력(808)에 의한 투명 디스플레이 기기(100)에서의 좌표 정보들과 좌표 정보들간의 관계 정보를 얻고, 저장한다. 이 때, 투명 디스플레이 기기(100)는 도 8e에서 얻어진 제 1 터치 입력에 따른 좌표 정보들과 제 2 터치 입력에 따른 좌표 정보들 및 좌표 정보들간의 관계 정보가 상술한 도 8b 내지 도 8d에서 얻어진 좌표 정보들 및 좌표 정보들간의 관계 정보와 다른 단계에서 얻어진 것이라는 것을 알 수 있도록 분리하여 저장한다.

도 8f에 도시된 바와 같이 투명 디스플레이 기기(100)와 외부 기기(110)가 겹칠 때, 제 1 터치 입력은 809와 같이 외부 기기(110)의 윤곽선을 따라 그리는 터치 동작에 기초하고, 제 2 터치 입력은 810과 같이 텍스트 “토끼”를 따라 쓰기 터치 동작에 기초하여 수신된다. 이 때, 제 2 터치 입력을 감지한 결과 정보(810)는 투명 디스플레이 기기(100)상에 디스플레이 된다. 이에 따라 투명 디스플레이 기기(100)상에 디스플레이 되는 객체의 이미지는 도 8b, 도 8c, 도 8d 및 도 8e에서의 제 2 터치 입력을 감지한 결과 정보를 포함하는 이미지를 갖는다. 투명 디스플레이 기기(100)는 도 8f에서의 제 1 터치 입력과 제 2 터치 입력에 따른 투명 디스플레이 기기(100)에서의 좌표 정보들과 좌표 정보들간의 관계 정보를 상술한 도 8b 내지 도 8e에서와 같이 얻고 저장한다.

도 8b 내지 도 8f에서의 제 2 터치 입력을 감지한 결과 정보를 투명 디스플레이 기기(100)상에 디스플레이 함에 따라 투명 디스플레이 기기(100)상에 도 8g에 도시된 바와 같이 제 2 터치 입력을 감지한 결과 정보가 디스플레이 된다. 이와 같이 제 2 터치 입력이 수신될 때, 제 2 터치 입력을 감지한 결과 정보를 투명 디스플레이 기기(100)상의 디스플레이 함으로써, 외부 기기(110)로부터 수신될 객체에 대한 디스플레이 위치가 사전에 결정될 수 있다.

또한, 도 8b 내지 도 8f는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 조각을 맞추기 위해, 투명 디스플레이 기기(100)의 위치를 변경하거나 투명 디스플레이 기기(100)를 이동한 후 수행될 수 있다. 따라서 각 화면에서의 제 1 터치 입력과 제 2 터치 입력을 투명 디스플레이 기기(100)는 명확하게 구분할 수 있다. 예를 들어, 도 8b에서의 제 1 터치 입력과 제 2 터치 입력 후, 투명 디스플레이 기기(100)는, 도 8c에 도시된 바와 같이 외부 기기(110)에 디스플레이 되고 있는 객체를 선택하기 위하여, 위치를 변경하거나 이동한 후, 도 8c에서의 제 1 터치 입력 동작과 제 2 터치 입력 동작을 수행한다. 그러므로, 도 8b에서의 제 1 터치 입력 및 제 2 터치 입력과 도 8c에서의 제 1 터치 입력과 제 2 터치 입력을 투명 디스플레이 기기(100)의 위치 변경 감지 또는 이동 감지로 구분할 수 있다.

도 9a 내지 도 9C는 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 또 다른 화면의 예이다.

도 9a를 참조하면, 투명 디스플레이 기기(100)와 외부 기기(110)의 사이즈가 동일한 경우이다. 도 9b를 참조하면, 투명 디스플레이 기기(100)상에 디스플레이 되는 메뉴(910)에 기초하여 제 1 터치 입력 동작을 수행하고, 제 2 터치 입력은 해(sun)에 대해 닫힌 영역을 설정하는 터치 동작, 구름(cloud)에 대해 탭 기반의 터치 동작, 및 꽃에 대해 윤곽선을 따라 그리는 터치 동작에 기초한다. 도 9b의 닫힌 영역은 도 9b에 도시된 바로 제한되지 않는다. 예를 들어, 닫힌 영역은 여러 유형의 폐곡선 형태를 이용할 수 있도록 투명 디스플레이 기기(100)에 설정될 수 있다.

도 10a 내지 도 10d는 증강 현실 서비스에 기초한 제 1 터치 입력과 제 2 터치 입력을 설명하기 위한 화면의 예이다.

도 10a는 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 인접한 위치에 증강현실(Augmented Reality) 서비스에 기초한 외부 기기(110)의 정보가 디스플레이 되고 있는 경우이다. 증강 현실 서비스에 기초한 외부 기기(110)의 정보는 투명 디스플레이 기기(100)와 외부 기기(110)간의 물리적인 위치 기반으로 외부 기기와 다른 외부 기기 또는 서버로부터 제공될 수 있다.

외부 기기(110)의 증강 현실 서비스에 기초한 정보는 액세스 포인트를 사용하여 제공될 수 있다. 투명 디스플레이 기기(100)와 외부 기기(110)가 동일한 액세스 포인트의 통신 영역에 있을 때, 투명 디스플레이 기기(100)와 외부 기기(110)간의 물리적인 위치는 각 기기에 장착된 지자기 센서, 가속도 센서, 자이로 센서, 및 고도 센서 등과 같은 실내에서 기기의 물리적인 위치를 추정할 수 있는 센서를 이용하여 추정되고, 추정된 물리적인 위치에 따라 외부 기기(110)의 증강 현실 서비스에 기초한 정보를 상술한 다른 외부 기기 또는 서버로부터 제공받을 수 있다.

또는 NFC 통신과 같은 근거리 통신을 사용하여 투명 디스플레이 기기(100)는 외부 기기(110)에 대한 증강 현실 서비스 정보를 제공받는데 필요한 정보(예를 들어 외부 기기(110)를 인식할 수 있는 마크 정보)를 외부 기기(110)로부터 수신 또는 리드하고, 이를 이용하여 서버 또는 상술한 다른 외부 기기로부터 외부 기기(110)에 대한 증강 현실 서비스정보를 수집하고 디스플레이 할 수 있다.

투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)의 증강 현실 서비스에 기초한 정보는 도 10a에 도시된 바와 같이 디바이스 이름, 소유자 명, 외부 기기(110)가 다른 기기와 공유할 수 있는 내용 등이 디스플레이 될 수 있으나 이로 제한되지 않는다.

도 10a에 도시된 바와 같이 증강 현실 서비스에 기초한 외부 기기(110)의 정보가 디스플레이 될 때, 제 1 터치 입력은 도 10b에 도시된 바와 같이 외부 기기(110)에 대한 터치 기반의 닫힌 영역 설정 동작에 의할 수 있다. 터치 기반의 닫힌 영역은 도 10b에 도시된 바로 제한되지 않는다.

제 1 터치 입력이 수신됨에 따라 공유 폴더에 대한 정보가 도 10c에 도시된 바와 같이 투명 디스플레이 기기(100)상에 디스플레이 된다. 공유 폴더에 대한 정보는 증강 현실 서비스에 기초한 정보일 수 있다. 그러나, 제 1 터치 입력이 외부 기기(110)로 전송됨에 따라 외부 기기(110)로부터 수신된 정보일 수 있다. 이 때, 외부 기기(110)에 디스플레이 되는 화면은 공유 폴더에 대한 정보를 디스플레이 하지 않을 수 있다.

투명 디스플레이 기기(100)에 디스플레이 되고 있는 공유 폴더에 대한 정보에 기초하여 도 10c에 도시된 바와 같이 원하는 폴더에 대한 터치 기반의 닫힌 영역 설정 동작 또는 탭 기반의 터치 동작에 따른 제 2 터치 입력이 수신됨에 따라 도 10d에 도시된 바와 같은 선택 가능한 픽쳐(picture)들이 디스플레이 될 수 있다. 외부 기기(110)에 디스플레이 되고 있는 화면은 도 10d에 도시된 선택 가능한 픽쳐들을 디스플레이 하지 않을 수 있다.

도 10d에 도시된 선택 가능한 픽쳐들중 원하는 픽쳐에 대한 터치 기반의 닫힌 영역 설정 동작으로 투명 디스플레이 기기(100)는 제 2 터치 입력 동작을 수행할 수 있다.

한편, 도 2의 단계 S202에서, 투명 디스플레이 기기(100)는 제 1 터치 입력과 제 2 터치 입력에 기초하여 외부 기기(110)로 선택된 적어도 하나의 객체에 대한 정보를 요청한다. 객체에 대한 정보를 요청하는 신호는 제 1 터치 입력과 제 2 터치 입력에 따른 투명 디스플레이 기기(100)에서의 좌표 정보들 및/또는 좌표 정보들간의 관계 정보를 포함할 수 있다.

그러나 객체에 대한 정보를 요청하는 신호는 투명 디스플레이 기기(100)에 구비된 상술한 좌표 정보 컨버팅 기능을 이용하여 컨버팅된 제 1 터치 입력과 제 2 터치 입력에 따른 외부 기기(110)상의 좌표 정보들 및/또는 좌표 정보들간의 관계 정보를 포함할 수 있다. 제 2 터치 입력에 따른 외부 기기(110)상의 좌표 정보는 외부 기기(110)상에 디스플레이 되고 있는 객체의 좌표 정보로 볼 수 있다.

객체에 대한 정보를 요청하는 신호는 객체와의 연관 정보를 요청하는 신호를더 포함할 수 있다. 객체와의 연관 정보를 요청하는 신호는 예를 들어, 제 2 터치 입력에 따라 선택된 객체가 폴더일 때, 폴더와 폴더에 포함된 객체들을 요청하는 정보를 포함할 수 있다. 폴더에 포함된 객체들은 외부 기기(110)에 디스플레이 되고 있지 않은 객체로 언급될 수 있다.

객체에 대한 정보를 요청하는 신호는 투명 디스플레이 기기(100)에서 제 1 터치 입력과 제 2 터치 입력에 따른 투명 디스플레이 기기(100)에서의 좌표 정보들과 투명 디스플레이 기기(100)의 스크린 사이즈 정보를 포함할 수 있다. 이러한 경우에, 외부 기기(110)는 투명 디스플레이 기기(100)로부터 수신된 정보와 외부 기기(110)의 스크린 정보에 기초하여 제 1 터치 입력과 제 2 터치 입력에 따른 외부 기기(110)상의 좌표 정보를 검출할 수 있다. 외부 기기(110)상의 좌표 정보 검출은 상술한 도 8b 내지 도 8f에서 설명한 바와 같이 검출될 수 있으나 이로 제한되지 않는다.

객체에 대한 정보를 요청하는 신호는 상술한 도 3 내지 도 10에서 설명된 제 1 터치 입력과 제 2 터치 입력의 예들에 의해 추정될 수 있는 다양한 정보를 포함할 수 있다.

단계 S203에서, 투명 디스플레이 기기(100)는 외부 기기(110)로부터 선택된 객체에 대한 정보를 수신하고, 단계 S204에서, 투명 디스플레이 기기(100)는 수신된 객체에 대한 정보를 투명 디스플레이 기기(100)에 디스플레이 한다.

수신된 객체에 대한 정보는 제 2 터치 입력에 의해 선택된 객체와 동일한 디스플레이 형태를 갖는 적어도 하나의 다른 객체를 포함할 수 있다. 다른 객체는 상기 선택된 객체와 상기 외부 기기(110)에서 디스플레이 되고 있는 위치가 다르다. 즉, 도 6b에 도시된 바와 같이, 제 2 터치 입력이 텍스트 P를 따라 쓰기 터치 동작에 기초하여 수신된 경우에, 도 6c에 도시된 바와 같이 투명 디스플레이 기기(100)는 외부 기기(110)로부터 서로 다른 디스플레이 위치에 디스플레이 되고 있는 텍스트 P를 모두 수신하고, 디스플레이 한다.

이 때, 수신되는 정보에 대한 투명 디스플레이 기기(100)상의 디스플레이 위치는 외부 기기(110)에서 디스플레이 되고 있는 위치와 유사하게 대응될 수 있다. 투명 디스플레이 기기(100)는 수신된 정보가 복수개인 경우에, 단계 S203에서, 각 정보의 외부 기기(110)에서의 디스플레이 좌표 정보를 수신하고, 투명 디스플레이 기기(100)의 스크린 사이즈 정보와 외부 기기(110)로부터 수신된 디스플레이 좌표 정보를 이용하여 투명 디스플레이 기기(100)에서의 디스플레이 좌표 정보를 검출하고, 검출된 좌표 정보를 이용하여 수신된 복수개의 객체를 디스플레이 할 수 있다. 좌표 정보 검출은 상술한 좌표 정보 컨버팅에 의해 수행될 수 있다.

그러나, 외부 기기(110)에서 투명 디스플레이 기기(100)의 스크린 사이즈 정보와 복수의 객체 정보의 외부 기기(110)상의 디스플레이 좌표 정보를 이용하여 투명 디스플레이 기기(100)에서 디스플레이 될 위치의 좌표 정보를 검출하고, 검출된 좌표 정보와 객체의 정보를 투명 디스플레이 기기(100)로 전송하고, 투명 디스플레이 기기(100)는 수신된 좌표 정보에 기초하여 객체를 디스플레이 할 수 있다.

단계 S203에서, 외부 기기(110)로부터 수신된 선택된 객체에 대한 정보는, 상기 선택된 객체에 연관된 정보를 포함할 수 있다. 객체에 연관된 정보는 상술한 바와 같이 외부 기기(110)에 디스플레이 되고 있지 않은 정보(예를 들어 폴더에 포함되는 객체 정보)를 포함할 수 있다.

단계 S204에서, 상기 수신된 정보를 상기 투명 디스플레이 기기(100)에서 디스플레이 하는 단계는, 상술한 도 6c, 도 7c 및 도 9c에 도시된 바와 같이 외부 기기(110)에서 디스플레이 되고 있는 위치와 유사한 디스플레이 위치에 수신된 정보를 디스플레이 할 수 있으나 도 10d와 같이 제 2 터치 입력이 수신될 경우에, 선택된 객체인 픽쳐들(Pic1, Pic5, Pic 6)이 수신되므로, 투명 디스플레이 기기(100)는 수신된 픽쳐들((Pic1, Pic5, Pic 6)을 순차적으로 디스플레이 하거나 도 10d의 화면에 기초한 위치에 수신된 픽쳐들(Pic1, Pic5, Pic 6)을 디스플레이 할 수 있다. 수신된 정보는 투명 디스플레이 기기(100)의 클립 보드(clip board)에 저장되거나 클립 보드를 생성하고, 생성된 클립 보드상에 디스플레이 될 수 있다.

도 11은 바람직한 다른 실시 예에 따른 투명 디스플레이 기기에서의 정보 디스플레이 방법의 흐름도이다. 도 11은 편집 기능을 추가한 경우이다.

단계 S1101에서, 투명 디스플레이 기기(100)는 제 1 터치 입력과 제 2 터치 입력을 수신한다. 제 1 터치 입력 및 제 2 터치 입력은 도 2 내지 도 10에서 언급된 제 1 터치 입력 및 제 2 터치 입력과 같다.

단계 S1102에서, 투명 디스플레이 기기(100)는 제 1 터치 입력과 제 2 터치 입력에 기초하여 외부 기기(110)로 객체에 대한 정보를 요청한다. 객체에 대한 정보 요청은 도 2의 단계 S201에서 언급된 객체에 대한 정보 요청과 같다.

단계 S1103에서, 투명 디스플레이 기기(100)는 외부 기기(110)로부터 객체에 대한 정보 요청에 대응되는 정보를 수신한다. 수신된 객체에 대한 정보는 단계 S203에서 언급된 정보와 같다.

단계 S1104에서, 투명 디스플레이 기기(100)는 수신된 정보를 투명 디스플레이 기기(100)에 디스플레이 한다.

단계 S1105에서, 투명 디스플레이 기기(100)는 사용자의 입력에 따라 투명 디스플레이 기기(100)에 디스플레이 되고 있는 수신된 정보를 편집한다.

즉, 도 7c에 도시된 바와 같이 수신된 객체가 투명 디스플레이 기기(100)에 디스플레이 되고 있을 때, 701 및 702와 같이 객체들을 결합하기 위한 터치 기반의 사용자의 입력이 수신되면, 투명 디스플레이 기기(100)는 도 7d에 도시된 바와 같이 객체들을 결합한 화면을 디스플레이 한다.

사용자의 입력인 701 및 702는 다양한 터치 기반 동작에 의해 수신될 수 있다. 예를 들어, 사용자의 입력인 701 및 702는 이동하고자 하는 객체를 롱 터치한 후 결합하고자 하는 객체의 원하는 위치로 드래그하는 터치 기반 동작, 이동하고자 하는 객체를 롱 터치하고, 결합하고자 하는 객체의 원하는 위치를 롱 터치하는 터치 기반 동작, 또는 이동하고자 하는 객체에 터치 기반의 닫힌 영역을 설정하고, 결합하고자 하는 객체의 원하는 위치를 롱 터치하는 터치 기반 동작, 이동하고자 하는 객체에 터치 기반의 닫힌 영역을 설정하고, 결합하고자 하는 객체의 원하는 위치에 터치 기반의 닫힌 영역을 설정하고, 닫힌 영역들을 연결하는 터치 기반 동작 등 다양한 터치 기반 동작으로 수행될 수 있다.

단계 S1105에서의 편집은 도 7c 및 도 7d에 도시된 바와 같이 객체를 결합하는 것으로 제한되지 않는다. 객체의 형태 변화, 또는 객체의 내용 변화 등 객체에 대한 다양한 편집뿐 아니라 객체를 포함한 스크린에 대한 편집이 수행될 수 있다.

투명 디스플레이 기기(100)는 외부 기기(110)와의 인터랙션(interaction)에 기초하여 상술한 편집 동작을 수행할 수 있다. 이에 따라 외부 기기(110)에 디스플레이 되고 있는 정보는 투명 디스플레이 기기(100)에서의 편집 결과를 실시간으로 반영할 수 있다. 편집 결과는 투명 디스플레이 기기(100)의 사용자의 입력에 따라 외부 기기(110)에만 저장되거나 투명 디스플레이 기기(100)에만 저장되거나 두 기기(100, 110)에 모두 저장될 수 있다.

도 12는 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에서의 정보 디스플레이 방법의 흐름도이다. 도 12의 경우에, 투명 디스플레이 기기(100)는 플렉서블(flexible)한 특성을 갖고, 터치 기반 입력에 따라 전면부와 후면부가 함께 변형될 수 있는 기기이고, 외부 기기(110)는 터치 스크린을 갖는 기기인 경우이다.

단계 S1201에서, 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 선택을 나타내는 터치 입력을 수신한다. 이 때 수신되는 터치 입력은 도 2 내지 도 10에서 언급된 제 2 터치 입력에 대응될 수 있다.

단계 S1202에서, 투명 디스플레이 기기(100)의 터치 입력이 수신된 전면부와 후면부의 형태를 외부 기기(110)방향으로 돌출되도록 변형시킨다.

도 13a와 도 13b는 플렉서블한 성질을 갖고, 터치 기반 입력에 따라 전면부와 후면부가 함께 변형되는 투명 디스플레이 기기(100)와 외부 기기(110)간의 관계를 설명하기 위한 측면도이다.

도 13a는 터치 기반 입력이 수신되기 전의 투명 디스플레이 기기(100)와 외부 기기(110)가 겹쳐진 측면도이다.

도 13b는 투명 디스플레이 기기(100)의 전면부(1301)에서의 터치 기반의 사용자 입력에 따라 투명 디스플레이 기기(100)의 전면부(1301)와 후면부(1302)의 형태가 함께 변형되면서 외부 기기(110)의 터치 스크린(1303)를 터치하는 경우이다. 외부 기기(110)의 터치 스크린이 투명 디스플레이 기기(100)의 후면부(1302)와의 접촉면을 터치 기반 입력으로 인식할 수 있도록, 투명 디스플레이 기기(100)의 후면부(1302)는 정전압식으로 구성될 수 있으나 이로 제한되지 않는다. 즉, 투명 디스플레이 기기(100)의 후면부(1302)는 외부 기기(110)의 터치 스크린(1303)의 터치 감지 방식에 따라 구성될 수 있다.

한편, 단계 S1203에서, 투명 디스플레이 기기(100)는 투명 디스플레이 기기(100)의 후면부(1302)와 외부 기기(110)간의 접촉에 따른 터치 입력에 기초하여 외부 기기(110)로부터 선택된 객체에 대한 정보를 수신한다.

단계 S1204에서, 투명 디스플레이 기기(100)는 수신된 정보를 디스플레이 한다.

도 14는 바람직한 또 다른 실시 예에 따른 투명 디스플레이에서의 정보 디스플레이 방법의 흐름도이다. 도 14는 투명 디스플레이 기기(100)와 외부 기기(110)간에 근거리 무선 통신에 기초하여 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 정보 및 스크린 사이즈 정보를 수신하는 경우이다.

단계 S1401에서, 투명 디스플레이 기기(100)는 근거리 무선 통신에 기초하여 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 정보와 외부 기기(110)의 스크린 사이즈 정보를 수신한다. 근거리 무선 통신은 NFC(Near Field Communication), 블루투스 통신, 와이파이 다이렉트 통신, 및 IR(Infrared Data Association) 통신 등을 포함할 수 있으나 이로 제한되지 않는다.

단계 S1402에서, 투명 디스플레이 기기(100)는 외부 기기(110)와 겹친 상태인지를 판단한다. 단계 S1402에서의 판단은 투명 디스플레이 기기(100)의 터치 입력에 따라 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 정보를 투명 디스플레이 기기(100)에 디스플레이 하고자 하는 사용자의 의도를 판단하는 것을 의미할 수 있다. 사용자의 의도는 투명 디스플레이 기기(100)에 디스플레이 하고자 하는 객체를 선택하고자 하는 의도로 해석될 수 있다.

투명 디스플레이 기기(100)와 외부 기기(110)가 겹친 상태인지 확인하는 것은 투명 디스플레이 기기(100)의 후면부에 접촉 감지 센서를 구비하여 수행되거나 외부 기기(110)의 전면부에 구비된 접촉 감지 센서에 의해 감지된 결과를 근거리 무선 통신에 기초하여 투명 디스플레이 기기(100)로 전송하도록 구현될 수 있으나 이로 제한되지 않는다.

또한, 단계 S1402에서 투명 디스플레이 기기(100)와 외부 기기(110)가 겹치는 것은, 도 3a에 도시된 예와 같이 외부 기기(110)가 적은 경우에, 투명 디스플레이 기기(100)의 스크린 내에 외부 기기(110)가 포함되도록 겹칠 수 있으나 이로 제한되지 않는다. 도 4a에 도시된 예와 같이 투명 디스플레이 기기(100)가 외부 기기(110)보다 적은 경우에, 외부 기기(110)의 일부 영역이 투명 디스플레이 기기(100)에 겹칠 수 있으나 이로 제한되지 않는다. 도 9a에서와 같이 투명 디스플레이 기기(100)와 외부 기기(110)의 사이즈가 일치하는 경우에, 투명 디스플레이 기기(100)와 외부 기기(110)는 겹치는 면이 동일할 수 있다.

단계 S1402에서, 투명 디스플레이 기기(100)는 투명 디스플레이 기기(100)와 외부 기기(110)가 겹친 것으로 판단되면, 단계 1403에서, 투명 디스플레이 기기(100)는 사용자의 입력에 따라 근거리 무선 통신에 기초하여 수신된 정보를 이용하여 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 정보를 디스플레이 한다. 단계 S1403에서의 사용자의 입력은 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 디스플레이 요청을 포함할 수 있으나 이로 제한되지 않는다.

도 15는 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에서의 정보 디스플레이 방법의 동작 흐름도이다. 도 15는 투명 디스플레이 기기(100)의 카메라 기능을 이용하여 외부 기기(110)를 촬영한 정보를 사용자의 입력에 따라 투명 디스플레이 기기(100)에 디스플레이 하는 경우이다.

단계 S1501에서, 투명 디스플레이 기기(100)는 카메라 기능을 이용하여 외부 기기(100)에 디스플레이 되고 있는 객체를 촬영한다.

단계 S1502에서, 투명 디스플레이 기기(100)는 외부 기기(110)와 겹친 상태인지를 판단한다. 투명 디스플레이 기기(100)와 외부 기기(110)가 서로 겹친 상태인지 여부를 판단하는 것은 상술한 단계 S1402와 같은 방법으로 수행될 수 있다.

단계 S1503에서, 투명 디스플레이 기기(100)와 외부 기기(110)가 겹친 상태로 판단되는 경우에, 사용자의 입력에 따라 투명 디스플레이 기기(110)는 촬영된 외부 기기(110)에 디스플레이 되고 있는 객체를 디스플레이 한다. 사용자의 입력은 촬영된 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 출력 요청을 포함하나 이로 제한되지 않는다.

도 16은 바람직한 실시 예에 따른 투명 디스플레이 기기(100)의 기능 블록도의 일 예이다.

도 16을 참조하면, 투명 디스플레이 기기(100)는 투명 디스플레이(1610), 저장기(1620), 통신 인터페이스(1630), 프로세서(1640), 및 센서(1650)를 포함한다. 그러나 투명 디스플레이 기기(100)는 도 16에 도시된 구성 요소 외의 추가 구성 요소를 포함할 수 있다. 예를 들어, 투명 디스플레이 기기(100)는 USB(Universal Serial Bus)와 같은 인터페이스를 포함하거나 카메라 모듈을 포함하도록 구성될 수 있다.

투명 디스플레이(1610)는 외부 기기(110)의 화면에 디스플레이 되고 있는 객체가 보이고, 터치 기반 입력이 수신되도록 구성된다. 투명 디스플레이(1610)는 투명 LCD(Liquid Crystal Display) 형, 투명 TFEL(Thin-Film Electroluminescent Panel) 형, 투명 OLED 형, 투사형 등과 같은 다양한 형태로 구현될 수 있다. 이하 투명 디스플레이(1610)의 구조에 대한 다양한 실시 예를 설명한다.

투명 LCD 형이란 현재 사용되고 있는 LCD 장치에서 백라이트 유닛을 제거하고, 한 쌍의 편광판, 광학 필름, 투명 박막 트랜지스터, 투명 전극 등을 사용하여 구현한 투명 디스플레이 장치를 의미한다. 투명 디스플레이 장치는 투명 디스플레이로 언급될 수 있다. 투명 LCD 장치의 경우에, 편광판이나 광학 필름등에 의해 투과도가 떨어지고, 백라이트 유닛 대신 주변 광을 이용하게 되므로 광 효율이 떨어지지만, 대면적 투명 디스플레이를 구현할 수 있다는 장점이 있다.

투명 TFEL 형이란 투명 전극, 무기 형광체, 절연막으로 이루어진 교류형 무기박막 EL 디스플레이(AC-TFEL)를 사용하는 투명 디스플레이 장치를 의미한다. AC-TFEL은 무기 형광체 내부에 가속이 된 전자가 지나가면서 형광체를 여기시켜 빛을 내게 하는 디스플레이이다. 투명 디스플레이부(1610)가 투명 TFEL 형태로 구현된 경우, 프로세서(1640)는 적절한 위치로 전자가 투사되도록 조정하여, 정보 표시 위치를 결정할 수 있다. 무기 형광체, 절연막이 투명한 특성을 가지므로, 매우 투명한 디스플레이를 구현할 수 있다.

그 밖에, 투명 OLED형이란 자체 발광이 가능한 OLED를 이용하는 투명 디스플레이 장치를 의미한다. OELD는 유기 발광층이 투명하기 때문에, 양쪽 전극을 투명 전극으로 사용하면, 투명 디스플레이 장치로 구현 가능하다. OLED는 유기 발광층 양쪽에서 전자와 정공을 주입하여 이들이 유기 발광층 내에서 결합되면서 빛을 내게 된다. 투명 OLED 장치는 이러한 원리를 사용하여 원하는 위치에 전자 및 정공을 주입하여, 정보를 표시한다.

도 17은 투명 OLED 형으로 구현된 투명 디스플레이(1610)의 세부 구성 예를 나타내는 도면이다. 그러나 투명 디스플레이(1610)는 도 17에 도시된 바로 제한되지 않는다.

도 17을 참조하면, 투명 디스플레이(1610)는 투명 기판(1702), 투명 트랜지스터층(1703), 제 1 투명 전극(1704), 투명 유기 발광 층(Transparent Organic Light-Emitting layer)(1705), 제 2 투명 전극(1706), 및 연결 전극(1707)을 포함한다.

투명 기판(1702)은 투명한 성질을 가지는 플라스틱과 같은 폴리머 재료 또는 유리를 사용할 수 있다. 투명 기판(1702)의 재질은 투명 디스플레이 기기(100)가 적용된 사용 환경에 따라 결정될 수 있다. 가령, 폴리머 재료는 가볍고 유연하다는 장점이 있어 휴대형 디스플레이 장치에 사용될 수 있으며, 유리는 상점의 쇼윈도(show window)나 일반 창문 등에 사용할 수 있다.

투명 트랜지스터층(1703)이란 기존 박막 트랜지스터의 불투명한 실리콘을 투명한 아연산화물, 산화 티타늄 등과 같은 투명 물질로 대체하여 제작한 트랜지스터를 포함하는 레이어를 의미한다. 투명 트랜지스터층(1703) 내에는 소스, 게이트, 드레인 및 각종 유전막(1708, 1709)이 마련되며, 드레인과 제1 투명 전극(1704)을 전기적으로 연결하는 연결 전극(1707)도 마련될 수 있다. 투명 트랜지스터층(1703)은 투명 디스플레이 기기(100)의 디스플레이 표면의 전체 영역에 고르게 분포된 복수 개의 투명 트랜지스터가 마련된다. 프로세서(1640)는 투명 트랜지스터층(1703) 내의 각 트랜지스터들의 게이트로 제어 신호를 인가하여, 해당 투명 트랜지스터를 구동시켜 정보를 표시할 수 있다.

제 1 투명 전극 (1704) 및 제 2 투명 전극(1706)은 투명 유기 발광층(1705)을 기준으로 서로 반대 방향에 배치된다. 제1 투명 전극, 투명 유기 발광층 및 제2 투명 전극(1704, 1705, 1706)은 투명 유기 발광 다이오드(Organic Light-Emitting Diodes)를 형성한다.

투명 유기 발광 다이오드는 구동 방식에 따라 크게 수동형(Passive Matrix OLED)과 능동형 (Active Matrix OLED)으로 분류된다. PMOLED는 제1 및 제2 투명 전극(1704, 1706)이 서로 교차하는 부분이 화소를 형성하는 구조이다. 반면, AMOLED는 각 화소를 구동하는 박막 트랜지스터(TFT)가 있는 구조이다.

제 1 투명 전극(1704) 및 제 2 투명 전극(1706)은 각각 복수 개의 라인 전극을 포함하며, 라인 전극의 정렬 방향은 서로 수직하게 형성된다. 가령, 제 1 투명 전극(1704)의 라인 전극들이 가로 방향으로 배열되었다면, 제 2 투명 전극(1706)의 라인 전극들은 세로 방향으로 배열된다. 이에 따라, 제 1 투명 전극(1704) 및 제 2 투명 전극(1706) 간에는 복수의 교차 영역이 형성된다. 각 교차 영역에는 투명 트랜지스터가 연결된다.

프로세서(1640)는 투명 트랜지스터를 이용하여 각 교차 영역 별로 전위차가 형성되도록 한다. 전위차가 형성된 교차 영역 내에서 각 전극으로부터 전자와 정공이 투명 유기 발광층(1705)으로 유입되어 결합하면서 발광이 이루어진다. 반면, 전위차가 형성되지 않은 교차 영역은 발광이 이루어지지 않으며, 이에 따라 후면 배경이 그대로 투명하게 비치게 된다.

제 1 및 제 2 투명 전극(1704, 1706)으로는 ITO(indium tin oxide)가 사용될 수 있다. 또는, 그래핀과 같은 신소재가 사용될 수도 있다. 그래핀이란 탄소원자가 서로 연결돼 벌집 모양의 평면 구조를 이루며 투명한 성질을 가지는 물질을 의미한다. 그 밖에, 투명 유기 발광 층(1705)도 다양한 재료로 구현될 수 있다.

한편, 상술한 바와 같이 투명 디스플레이부(1610)는 투명 LCD(Liquid Crystal Display) 형, 투명 TFEL(Thin-Film Electroluminescent Panel) 형, 투명 OLED 형 이외에 투사형으로도 구현될 수 있다. 투사형이란 HUD(Head Up Display)와 같이 투명한 스크린에 영상을 투사하여 디스플레이하는 방식을 의미한다.

또한, 투명 디스플레이부(1610)는 양면이 터치 가능한 터치 스크린일 수 있으나 전면만 터치 가능한 터치 스크린일 수 있다.

투명 디스플레이부(1610)는 투명 디스플레이 기기(100)에서 처리되는 객체를 포함한 정보를 디스플레이 한다. 정보는 객체 이외의 정보를 포함할 수 있다. 객체 이외의 정보는 디스플레이 되기는 하나 사용자 입력에 의해 선택될 수 없는 정보를 의미할 수 있다.

투명 디스플레이부(1610)는 투명 소자로 구성되고, 투명 소자에 대한 광 투과율을 조절하여 투명도를 조절하거나 각 픽셀의 RGB값을 조절하여 투명도를 조절할 수 있다.

또한 투명 디스플레이(1610)는 유기 발광 다이오드(Organic Light-emitting diode)와 액정 디스플레이(Liquid Crystal Display)를 결합한 구조를 가질 수 있다. 투명 디스플레이(1610)는 유기 발광 다이오드는 전면 입력부에 인접하게 위치시키고, 액정 디스플레이는 후면 입력부에 인접하게 위치시킬 수 있다. 투명 디스플레이(1610)가 상술한 결합된 구조를 갖는 경우에, 평상시에는 투명한 유리와 같은 상태를 유지하다가 전원 공급시 액정 디스플레이가 빛을 차단하여 투명 디스플레이(1610)는 불투명한 상태로 설정될 수 있다.

투명 디스플레이(1610)는 전면 입력부를 통한 사용자의 터치 입력을 수신한다. 투명 디스플레이(1610)에 디스플레이 되고 있는 화면은 UI(User Interface) 또는 GUI(Graphic User Interface) 화면을 포함한다. 또한 투명 디스플레이(1610)는 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 사용자의 터치 입력(상술한 제 1 터치 입력과 제 2 터치 입력)에 따라 객체에 대한 정보를 외부 기기(110)로 수신하여 디스플레이 할 수 있다.

저장기(1620)는 투명 디스플레이(1610)에서 정보 디스플레이 방법을 실행하도록 구성된 적어도 하나의 프로그램을 저장한다. 저장기(1620)는 고속 랜덤 액세스 메모리, 자기 디스크 저장 장치, 플래시 메모리와 같은 불휘발성 메모리 또는 다른 불휘발성 반도체 메모리를 포함할 수 있다.

도 18은 바람직한 실시 예에 따른 투명 디스플레이 기기(100)의 저장기(1620)에 저장되는 소프트웨어 계층을 설명하기 위한 도면이다.

도 18을 참조하면, 소프트웨어 계층은 스토리지 모듈(storage module)(1810), 센서 인식 모듈(sensor & recognition module)(1820), 통신 모듈(1830), 입출력 모듈(1860), 및 리젠 모듈(legend module)(1870)을 포함하나 이로 제한되지 않는다.

스토리지 모듈(1810)은 주소록, 환경 정보 등의 일반적인 데이터 저장소인 시스템 데이터베이스(1811) 및 투명 디스플레이부(1610)에 디스플레이 될 각 객체의 터치 모드에 대한 설정 값을 저장하는 터치 모드 데이터 영역(1812)을 포함한다.

센서 인식 모듈(1820)은 투명 디스플레이(1610)에 대한 터치를 인식하는 모듈(1821), 입력 받은 터치를 구분하는 모듈(1822)을 포함한다. 입력 받는 터치를 구분하는 모듈(1822)은 전면 입력 인터페이스에 대한 입력을 이벤트 처리기(X11)로 전달하는 전면 입력모드(1823), 후면 입력 인터페이스에 대한 입력을 이벤트 처리기(X11)로 전달하는 후면 입력 모드(1824), 양면 터치에 대한 입력(전면 입력 인터페이스 및 후면 입력 인터페이스 둘에 대한 터치에 대한 입력)을 이벤트 처리기(X11)로 전달하는 듀얼 모드(1825)를 포함한다. 그러나 센서 인식 모듈(1820)은 투명 디스플레이(1610)의 전면에 대한 입력만을 이벤트 처리기(X11)로 전달하는 입력 모드만으로 구성될 수 있다.

통신 모듈(1830)은 텔레포니 모듈(telephony module)(1840) 및 메세징 모듈(messaging module)(1850)을 포함하나 이로 제한되지 않는다.

텔레포니 모듈(1840)은 전화 연결을 위한 정보 수집 모듈(1842), VoIP(Voice over Internet Protocol)로 인터넷을 통한 음성 서비스 모듈(1841)을 포함한다.

메시지 모듈(1850)은 인터넷 연결을 통해 사용자간 대화 가능한 모듈인 인스턴트 모듈(1851), 단문 및 멀티미디어 메시지에 대한 모듈(1852), 이메일을 보내기 위한 모듈(1853)을 포함한다.

입출력 모듈(1860)은 UI & 그래픽 모듈(1861) 및 멀티 미디어 모듈(multimedia module)(1865)을 포함한다.

UI & 그래픽 모듈(1861)은 윈도우 매니저로 터치 입력을 받는 모듈인 X11(1862), 사용자에게 보여지는 모든 객체를 화면상에 출력해주는 모듈(1863), 및 객체별로 저장된 모드 설정 값과 현재 터치 입력에 대한 평가 모듈(1864)을 포함한다.

멀티미디어 모듈(1865)은 동영상 재생 모듈(1866), 동영상 및 스틸 사진 촬영 모듈(1867), 및 음성 재생 모듈(1868)을 포함한다.

바람직한 실시 예에 따른 정보 디스플레이 방법을 수행하기 위한 프로그램은 저장 모듈(1871)에 저장될 수 있다. 저장 모듈(1871)에는 다양한 애플리케이션들이 저장될 수 있다.

이상과 같이 저장기(1620)에는 다양한 구조의 프로그램이 저장되어 있을 수 있으며, 도 18에 도시된 바로 제한되지 않는다.

통신 인터페이스(1630)는 외부 기기(110), 서버(120), 및 AP(130)중 적어도 하나와 통신할 수 있다. 통신을 수행하기 위하여 통신 인터페이스(1630)는 무선 인터넷, 무선 인트라넷, 무선 전화 네트워크, 무선 랜(LAN) 통신, 와이파이(Wi-Fi) 통신, 와이파이 다이렉트(WFD, Wi-Fi Direct) 통신, 3G(Generation) 통신, 4G(4 Generation) LTE(Long Term Evolution) 통신, 블루투스(Bluetooth) 통신, 적외선(IrDA, Infrared Data Association) 통신, RFID(Radio Frequency Identification) 통신, UWB(Ultra WideBand) 통신, 지그비(Zigbee) 통신, NFC(Near Field Communication) 통신과 같은 무선 통신 네트워크를 통해 데이터를 송수신할 수 있도록 구성될 수 있으나 이로 제한되지 않는다. 특히 통신 인터페이스(1630)는 GPS(Grobal Positioning System) 모듈을 포함할 수 있다.

프로세서(1640)는 저장기(1620)에 저장된 프로그램을 이용하여 상술한 바람직한 실시 예들에 따른 동작을 수행할 수 있다. 프로세서(1640)는 투명 디스플레이(1610)를 통해 보이는 외부 기기(110)에 대한 기준 정보를 나타내는 제 1 터치 입력과 외부 기기(120)에 디스플레이 되고 있는 객체에 대한 선택을 나타내는 제 2 터치 입력을 수신한다. 프로세서(1640)는 통신 인터페이스(1630)를 통해 수신된 제 1 터치 입력과 제 2 터치 입력을 기초로 객체에 관한 정보를 외부 기기(110)로 요청한다. 통신 인터페이스(1630)를 통해 외부 기기(110)로부터 요청된 객체에 관한 정보가 수신되면, 프로세서(1640)는 수신된 정보를 투명 디스플레이(1610)에 디스플레이 한다.

바람직한 실시 예에 따른 정보 디스플레이 방법에 관련된 프로세서(1640)의 동작은 상술한 도 2, 도 11, 도 12, 도 14, 도 15, 및 후술할 도 21에 도시된 흐름도와 같이 수행될 수 있다.

센서(1650)는 투명 디스플레이 기기(100)의 위치, 투명 디스플레이 기기(100)에 대한 사용자의 접촉 유무, 투명 디스플레이 기기(100)의 방위, 투명 디스플레이 기기(100)의 가속 또는 감속 등과 같이 투명 디스플레이 기기(100)의 현재 상태를 감지하여 투명 디스플레이 기기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 특히, 센서(1650)는 도 10a 내지 도 10d에서 언급된 증강 현실 서비스에 기초한 정보를 제공받기 위해 투명 디스플레이 기기(100)의 위치에 대한 센싱 신호를 발생시킬 수 있다.

도 19는 바람직한 실시 예에 따른 투명 디스플레이 기기(100)의 다른 기능 블록도이다.

도 19를 참조하면, 투명 디스플레이 기기(100)는 투명 디스플레이(1901), 사용자 입력 인터페이스(1902), 센서(1903), 카메라(1904), 저장기(1905), 통신 인터페이스(1906), 포트(1907), 오디오 입력 인터페이스(1908), 오디오 신호 처리부(1909), 오디오 출력 인터페이스(1910), 전원부(1911), 및 프로세서(1912)를 포함하나 이로 제한되지 않는다. 즉, 투명 디스플레이 기기(100)는 도 19에 도시된 구성요소보다 도 16에 도시된 바와 같이 적은 구성 요소를 포함할 수 있고, 도 19에 도시된 구성요소 외에 추가적인 구성 요소를 포함할 수 있다.

투명 디스플레이(1901)는 터치 스크린으로 언급될 수 있다. 투명 디스플레이(1901)는 객체들을 디스플레이하고, 터치 기반 사용자 입력을 수신할 수 있다. 투명 디스플레이(1901)는 투명 디스플레이(1901)의 전면과 후면중 적어도 하나를 통해 터치 기반 사용자 입력을 수신할 수 있다. 이를 위하여 투명 디스플레이(1901)는 적어도 하나의 터치 센서를 포함한다. 터치 센서는 (x, y) 좌표를 기준으로 사용자 입력을 인식할 수 있다. 터치 센서는 직접 터치를 인식하는 센서 또는 근접 터치(proximity-touch)인식하는 센서로 구성될 수 있다.

사용자의 입력은 사용자의 제스처에 기초한 사용자의 요청(request) 또는 사용자의 선택(selection)에 따라 발생될 수 있다. 사용자의 제스처는 터치 횟수, 터치 패턴, 터치 면적, 및 터치 강도의 다양한 조합에 의해 다양하게 정의될 수 있다.

투명 디스플레이(1901)는 도 16의 투명 디스플레이(1610)에서 설명한 바와 같이 투명 소자로 구성되고, 투명 소자에 대한 광 투과율을 조절하여 투명도를 조절하거나 각 픽셀의 RGB값을 조절하여 투명도를 조절할 수 있다. 또한 투명 디스플레이부(1901)는 유기 발광 다이오드(Organic Light-emitting diode)와 액정 디스플레이(Liquid Crystal Display)를 결합된 구조를 가질 수 있다. 유기 발광 다이오드는 투명 디스플레이(1901)의 전면에 인접하게 위치시키고, 액정 디스플레이는 투명 디스플레이(1901)의 후면에 인접하게 위치시킬 수 있다.

투명 디스플레이(1901)는 전면 및 후면중 적어도 하나의 면을 통한 터치 기반의 사용자의 입력, 센서(1903)에 기초한 사용자의 입력, 카메라(1904)에 기초한 사용자의 입력, 오디오 입력 인터페이스(1908)에 기초한 사용자의 입력에 각각 응답하는 화면을 디스플레이 할 수 있다. 투명 디스플레이(1901)에 디스플레이 되는 화면은 UI(User Interface) 또는 GUI(Graphic User Interface) 화면을 포함한다.

투명 디스플레이(1901)는 도 16에서 설명한 투명 디스플레이(1610)와 같은 물리적인 구조를 가질 수 있다. 투명 디스플레이(1901)는 투명 디스플레이 기기(100)의 구현 형태에 따라 2개 이상 존재할 수 있다.

사용자 입력 인터페이스(1902)는 투명 디스플레이 기기(100)의 동작을 제어하기 위한 입력 데이터(또는 제어 데이터) 및 사용자 입력을 발생시킨다. 사용자 입력부(1902)는 키 패드(key pad), 돔 스위치(dome switch), 마우스 대신 사용되는 터치 패드(touch pad), 조그 휠(Jog wheel), 조그 스위치(Jog switch), 하드웨어(H/W) 버튼 등을 포함할 수 있다.

센서(1903)는 도 16에 도시된 센서(1650)와 같이 투명 디스플레이 기기(100)의 위치, 투명 디스플레이 기기(100)에 대한 사용자의 접촉 유무, 투명 디스플레이 기기(100)의 방위, 투명 디스플레이 기기(100)의 가속 또는 감속 등과 같이 투명 디스플레이 기기(100)의 현재 상태를 감지하여 투명 디스플레이 기기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다.

센서(1903)는 투명 디스플레이(1901)에서 언급된 직접 터치 또는 근접 터치를 감지하기 위한 다양한 센서 이외의 센서를 포함한다. 예를 들어 센서(1903)는 근접 센서를 포함할 수 있다. 근접 센서는 사전에 설정된 검출면에 접근하는 물체, 또는 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서의 예로 투과형 광전 센서, 직접 반사형 광전 센서, 미러 발사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다.

카메라(1904)는 화상 통화 모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지 영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고 처리된 화상 프레임은 투명 디스플레이(1901)에 디스플레이 될 수 있다. 카메라(1904)에 의해 처리된 화상 프레임은 저장기(1905)에 저장되거나 통신 인터페이스(1906) 또는 포트(1907)를 통해 다른 기기로 전송될 수 있다. 상기 전송된 화상 프레임을 수싱하는 기기는 외부 기기(110), 서버(120), 및 AP(130)중 적어도 하나를 포함할 수 있으나 이로 제한되지 않는다.

카메라(1904)는 투명 디스플레이(1901)의 전면 및 후면에서의 사용자 입력을 수신하거나 객체를 촬영할 수 있도록 구성될 수 있다. 카메라(1904)는 투명 디스플레이 기기(100)의 구성에 따라 2개 이상이 구비될 수 있다. 또한, 카메라(1904)는 사용자의 공간 제스처를 인식하는 입력 장치로 사용될 수 있다.

저장기(1905)는 후술할 프로세서(1912)에서 실행 가능하도록 구성된 적어도 하나의 프로그램과 자원(resource)을 저장한다. 적어도 하나의 프로그램은 본 발명의 바람직한 실시 예에 따른 정보 디스플레이 방법을 실행하는 프로그램, 투명 디스플레이 기기(100)의 운영 체계(Operating System) 프로그램, 투명 디스플레이 기기(100)에 설정된 애플리케이션, 및 투명 디스플레이 기기(100)의 각종 기능(예를 들어 통신 기능과 디스플레이 기능)을 수행하는데 필요한 프로그램을 포함한다.

자원은 상술한 프로그램들을 수행하는데 필요한 정보 및 본 발명의 바람직한 실시 예들에서 언급되는 정보 디스플레이 방법을 수행함에 따른 사용자 인터페이스(User Interface) 화면 정보 및 제 1 터치 입력과 제 2 터치 입력으로 인식되는 사용자의 입력 정보 등을 포함한다. 제 1 터치 입력과 제 2 터치 입력으로 인식되는 사용자의 입력 정보는 상술한 도 3 내지 도 10에서 설명된 예들에 기초하여 설정될 수 있으나 이로 제한되지 않는다.

저장기(1905)는 투명 디스플레이 기기(100)의 운영 체계를 비롯한 각종 기능을 수행하는데 필요한 적어도 하나의 프로그램을 저장하는 저장기와 본 발명의 바람직한 실시 예에 따른 정보 디스플레이 방법을 실행하는 하나 이상의 프로그램과 자원 및 다양한 애플리케이션들을 저장하는 저장기를 독립적으로 구성할 수 있다.

저장부(1905)는 플래시 메모리 타입, 하드디스크 타입, 멀티미디어 카드 마이크로 타입, 카드 타입의 메모리(예를 들어 SD, XD 메모리 등), 롬(ROM, Read-Only Memory), EEPROM(Electronically Erasable Programmable Read-only Memory), PROM(Programmable Read-only Memory) 자기 메모리, 광 디스크 중 적어도 하나의 타입의 저장 매체를 포함할 수 있다.

통신 인터페이스(1906)는 무선 인터넷, 무선 인트라넷, 무선 전화 네트워크, 무선 랜(LAN) 통신, 와이파이(Wi-Fi) 통신, 와이파이 다이렉트(WFD, Wi-Fi Direct) 통신, 3G(Generation) 통신, 4G(4 Generation) LTE 통신, 블루투스(Bluetooth) 통신, 적외선(IrDA, Infrared Data Association), RFID(Radio Frequency Identification) 통신, UWB(Ultra WideBand) 통신, 지그비(Zigbee) 통신, NFC(Near Field Communication)와 같은 무선 네트워크를 통해 외부 기기(110), 서버(120), 및 AP(130)중 적어도 하나와 데이터를 송수신할 수 있도록 구성된다.

통신 인터페이스(1906)는 방송 수신 모듈, 이동 통신 모듈, 무선 인터넷 모듈, 유선 인터넷 모듈, 근거리 통신 모듈, 및 위치 정보 모듈중 적어도 하나를 포함할 수 있으나 이로 제한되지 않는다.

방송 수신 모듈은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 이동 통신 모듈은 이동 통신망 상에서 기지국, 외부 기기(110), 서버(120)중 적어도 하나와 무선 신호를 송수신한다. 무선 신호는 음성 호 신호, 화상 통화 호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. 무선 인터넷 모듈은 무선 인터넷 접속을 위한 모듈을 의미한다. 유선 인터넷 모듈은 유선 인터넷 접속을 위한 모듈을 의미한다.

근거리 통신 모듈은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스, RFID, 적외선 통신(IrDA), UWB, Zigbee, WFD, 및 NFC 등이 이용될 수 있다. 근거리 통신 모듈을 통해 상술한 도 14에서 도시된 바람직한 실시 예와 같이 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 정보와 스크린 사이즈 정보를 수신할 수 있다. 예를 들어, NFC 통신 방식을 이용하는 경우에, 외부 기기(110)와 투명 디스플레이 기기(100)간의 거리가 NFC 통신 기반의 근거리 통신 반경이내에 도달하면, 투명 디스플레이 기기(100)는 외부 기기(110)로부터 상술한 정보들을 리드하거나 수신할 수 있다.

위치 정보 모듈은 투명 디스플레이 기기(100)의 위치를 확인하거나 얻기 위한 모듈이다. 일 예로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수개의 인공위성으로부터 위치 정보를 수신한다. 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다.

포트(1907)는 USB(Universal Serial Bus) 포트와 같은 플러그 앤 플레이(Plug and Play) 인터페이스를 이용하여 외부 기기(110)와 데이터를 송수신할 수 있다. 플러그 앤 플레이 인터페이스는 투명 디스플레이 기기(100)의 플러그에 외부 기기(110)가 꼽히며 자동으로 사용을 검출하고 인에이블(예를 들어, 플레이)하는 모듈을 의미한다. 상기 기기는 외부 기기(110)로 제한되지 않는다.

오디오 입력 인터페이스(1908)는 통화모드, 또는 녹화 모드, 또는 음성 인식 모드 등에서 외부의 음향 신호를 입력받는다. 오디오 입력부(1908)는 예를 들어 마이크로폰으로 구성될 수 있다. 오디오 입력부(1908)는 외부의 음향 신호를 입력 받는 과정에서 발생하는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘을 포함하도록 구성될 수 있다.

오디오 입력 인터페이스(1908)를 이용하여 입력되는 상기 음향 신호는 바람직한 실시 예에 따라 투명 디스플레이(1901)에 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 선택을 나타내는 사용자 입력을 포함할 수 있다. 오디오 입력 인터페이스(1908)를 통해 입력된 외부의 음향 신호는 저장기(1905)에 저장되거나 통신 인터페이스(1906) 또는 포트(1907)를 통해 외부로 전송될 수 있다. 외부는 외부 기기(110), 다른 외부 기기(미 도시됨), 서버(120), 및 AP(130)를 포함할 수 있다.

오디오 신호 처리부(1909)는 오디오 입력 인터페이스(1908)와 프로세서(1912)간 및 오디오 출력 인터페이스(1910)와 프로세서(1912)간의 인터페이스를 제공한다. 즉, 오디오 신호 처리부(1909)는 오디오 입력 인터페이스(1908)로부터 수신되는 음향 신호를 프로세서(1912)에서 처리할 수 있는 오디오 데이터로 변환하여 프로세서(1912)로 전송한다. 또한 오디오 신호 처리부(1909)는 프로세서(1912)로부터 전송되는 오디오 데이터를 전기적인 음향 신호로 변환하여 오디오 출력 인터페이스(1910)로 전송한다.

오디오 출력 인터페이스(1910)는 통화 모드, 또는 오디오 재생 모드 등에서 오디오 신호 처리부(1909)로부터 수신된 음향 신호 또는 오디오 신호를 출력한다. 오디오 출력 인터페이스(1910)는 스피커로 구성될 수 있다. 오디오 입력 인터페이스(1908)와 오디오 출력 인터페이스(1910)는 헤드셋과 같이 일체형으로 구성될 수 있다.

투명 디스플레이 기기(100)와 사용자간의 사용자 인터페이스 기능에 따라 투명 디스플레이(1901), 사용자 입력 인터페이스(1902), 센서(1903), 카메라(1904), 및 오디오 입력 인터페이스(1908)는 입력 장치 또는 입출력 장치로 언급될 수 있다. 예를 들어, 투명 디스플레이 기기(100)와 사용자간의 사용자 인터페이스 기능이 터치스크린 기능, 음성 인식 기능, 및 공간 제스처 인식 기능을 포함하는 경우에, 사용자 입력 인터페이스(1902), 센서(1903), 카메라(1904), 및 오디오 입력 인터페이스(1908)는 입력 장치로 언급되고, 투명 디스플레이(1901)는 입출력 장치로 언급될 수 있다.

전원(1911)은 투명 디스플레이 기기(100)의 다양한 구성 요소에 전력을 공급한다. 전원(1911)은 배터리 및 교류 전원과 같은 하나 이상의 전원을 포함한다. 투명 디스플레이 기기(100)는 전원(1911)을 포함하지 않고, 외부 전원 제공부(미 도시됨)와 연결될 수 있는 연결부(connection unit)(미 도시됨)를 포함할 수 있다.

프로세서(1912)는 투명 디스플레이 기기(100)의 전반적인 동작을 제어하는 것으로 하나 이상의 프로세서로 언급될 수 있다. 비록 도 19의 경우에 프로세서(1912)를 단일 칩 형태로 도시하였으나 투명 디스플레이 기기(100)의 기능에 따라 프로세서(1912)를 복수개의 프로세서로 분할하여 운영할 수 있기 때문이다.

프로세서(1912)는 투명 디스플레이(1901), 사용자 입력 인터페이스(1902), 센서(1903), 카메라(1904), 저장기(1905), 통신 인터페이스(1906), 포트(1907), 오디오 입력 인터페이스(1908), 오디오 출력 인터페이스(1910), 및 오디오 신호 처리부(1909)를 전반적으로 제어할 수 있다. 따라서 프로세서(1912)는 제어기나 마이크로프로세서, 디지털 신호 처리기(Digital Signal Processor) 등으로 언급될 수 있다.

또한 프로세서(1912)는 입력 장치에 해당되는 투명 디스플레이(1901), 사용자 입력 인터페이스(1902), 센서(1903), 카메라(1904), 오디오 입력 인터페이스(1908)를 이용하여 입력된 사용자의 입력과 투명 디스플레이(1901)에 기초한 사용자 인터페이스를 제공할 수 있다.

프로세서(1912)는 바람직한 실시 예에 따른 정보 디스플레이 방법에 관련된 적어도 하나의 프로그램을 실행시킬 수 있다. 프로세서(1912)는 상기 프로그램을 저장기(1905)로부터 리드하여 실행시키거나 통신 인터페이스(1906)를 통해 연결된 애플리케이션 또는 프로그램 제공 서버(미 도시됨) 또는 마켓 서버(미 도시됨)와 같은 외부 장치로부터 다운받아 실행시킬 수 있다.

프로세서(1912)는 투명 디스플레이 기기(100)내의 각종 기능 모듈과 프로세서(1912)간의 인터페이스 기능부를 포함하는 것으로 이해될 수 있다. 바람직한 실시 예에 따른 정보 디스플레이 방법에 관련된 프로세서(1912)의 동작은 상술한 도 2, 도 11, 도 12, 도 14, 도 15, 및 후술할 도 21에 도시된 흐름도와 같이 수행될 수 있다.

도 20은 바람직한 실시 예에 따른 외부 기기(110)의 동작 흐름도이다.

단계 S2001에서, 투명 디스플레이 기기(100)로부터 외부 기기(110)에 디스플레이 되고 있는 적어도 하나의 객체에 대한 정보 요청을 수신한다. 정보 요청은 기기간 직접 통신, 서버를 통한 통신, 및 중계기를 통한 통신중 하나에 기초하여 수행될 수 있다.

객체에 관한 정보 요청은 투명 디스플레이 기기(100)에서의 상술한 제 1 터치 입력과 상술한 제 2 터치 입력에 기초할 수 있다. 제 1 터치 입력은 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(110)에 대한 기준 정보를 나타내는 투명 디스플레이 기기(100)에서의 사용자의 입력이다. 제 2 터치 입력은 투명 디스플레이 기기(100)를 통해 보이는 외부 기기(110)에 디스플레이 되고 있는 적어도 하나의 객체에 대한 선택을 나타내는 투명 디스플레이 기기(100)에서의 사용자의 입력이다.

객체에 대한 정보 요청은 상술한 바람직한 실시 예들에서 설명한 바와 같이 선택된 객체의 외부 기기(110)에서 디스플레이 되고 있는 위치 정보(좌표 정보)를 포함할 수 있으나 투명 디스플레이 기기(100)의 스크린 사이즈, 투명 디스플레이 기기(100)에서의 제 1 터치 입력 및 제 2 터치 입력에 대한 투명 디스플레이 기기(100)에서의 좌표 정보를 포함할 수 있으나 이로 제한되지 않는다.

그러나, 객체에 대한 정보 요청은, 투명 디스플레이 기기(100)가 후술할 도 21의 동작 흐름도와 같이 동작할 경우에, 상술한 제 2 터치 입력에 대응되는 터치 입력에 기초할 수 있다.

단계 S2002에서, 외부 기기(110)는 수신된 객체에 대한 정보 요청에 응답하여 객체를 선택한다. 예를 들어, 요청된 객체가 하나의 아이콘인 경우에, 외부 기기(110)는 요청된 객체의 아이콘과 아이콘에 연결된 애플리케이션 프로그램을 선택한다. 요청된 객체가 하나의 폴더인 경우에 외부 기기(110)는 요청된 폴더 명과 폴더의 하위 계층에 있는 파일 또는 데이터들을 선택한다. 요청된 객체가 하나의 화면에 포함된 하나의 객체인 경우에, 외부 기기(110)는 수신된 정보 요청에 포함된 객체의 좌표 정보를 이용하여 객체를 선택한다. 요청된 객체가 하나의 화면에 포함된 복수의 객체인 경우에, 외부 기기(110)는 수신된 정보 요청에 포함된 객체의 좌표 정보를 이용하여 복수의 객체를 각각 선택한다.

단계 S2003에서 외부 기기(110)는 선택된 객체에 대한 정보를 투명 디스플레이 기기(100)로 전송한다. 객체에 대한 정보를 투명 디스플레이 기기(100)로 전송하는 방식은 상술한 객체에 대한 정보 요청 시와 동일한 방식으로 수행될 수 있으나 이로 제한되지 않는다. 예를 들어, 정보 요청 신호는 기기간 직접 통신 방식으로 수신되고, 정보 요청 신호에 응답하여 선택된 객체에 대한 정보는 중계기를 통하거나 서버를 통해 투명 디스플레이 기기(100)로 전송될 수 있다.

도 21은 바람직한 또 다른 실시 예에 따른 투명 디스플레이 기기에서의 정보 디스플레이 방법의 흐름도이다. 도 21는 도 2에서 언급된 제 2 터치 입력만을 이용하는 경우이다.

단계 S2101에서, 투명 디스플레이 기기(100)는 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 디스플레이 되고 있는 객체에 대한 선택을 나타내는 터치 입력을 수신한다. 이 때 수신되는 터치 입력은 도 2 내지 도 10에서 언급된 제 2 터치 입력에 대응된다. 투명 디스플레이 기기(100)에 투과되어 보이는 외부 기기(110)에 대한 정보는 상술한 도 1 내지 도 10에서 언급된 바와 같을 수 있다.

단계 S2102에서, 투명 디스플레이 기기(100)는 터치 입력을 기초로 선택된 객체에 대한 정보를 외부 기기(110)로 요청한다. 외부 기기(110)로 전송되는 터치 입력에 기초한 선택된 객체에 대한 정보 요청 신호는 도 2내지 도 10에서 언급된 제 2 터치 입력에 기초한 선택된 객체에 대한 정보 요청 신호를 포함한다.

단계 S2103에서, 투명 디스플레이 기기(100)는 외부 기기(110)로부터 선택된 객체에 대한 정보를 수신한다. 수신되는 정보는 단계 S2102에서 요청된 신호에 대응된 것으로, 도 2의 단계 S203에서 수신되는 정보와 같을 수 있다.

단계 S2104에서, 투명 디스플레이 기기(100)는 수신된 정보를 디스플레이 한다. 수신된 정보에 대한 디스플레이는 도 2의 단계 S204에서와 같이 수행될 수 있다.

도 21은 도 11의 단계 S1105를 포함하도록 변형하여 투명 디스플레이 기기(100)에 디스플레이 되는 객체를 외부 기기(110)와의 인터랙션에 기초하여 편집할 수 있다.

바람직한 실시 예들에 따른 정보 디스플레이 방법을 컴퓨터로 구현하는 방법을 수행하도록 하는 명령어들을 포함하는 하나 이상의 프로그램은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로써 기록되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로써 저장되고 실행될 수 있다.

이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims

삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
투명 디스플레이 기기상에 정보를 디스플레이 하는 방법에 있어서,
상기 투명 디스플레이 기기와 외부 기기간의 통신을 통해 상기 외부 기기의 스크린 사이즈 정보를 수신하는 단계;
상기 투명 디스플레이 기기의 화면을 통해 보이는 상기 외부 기기의 제 1 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 1 터치 입력을 수신하는 단계;
상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 화면에 디스플레이 되고 있는 객체의 제 2 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 2 터치 입력을 수신하는 단계;
상기 외부 기기의 상기 스크린 사이즈 정보에 기초하여 상기 제 1 위치 정보 및 상기 제 2 위치 정보의 좌표 정보를 포함하는 상기 객체에 관한 정보 요청을 상기 외부 기기로 전송하는 단계;
상기 객체에 관한 정보 요청의 전송에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하는 단계; 및
상기 수신된 객체에 관한 정보를 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 하는 단계를 포함하는 정보 디스플레이 방법.
제 22 항에 있어서, 상기 제 1 위치 정보는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선을 나타내는 정보 디스플레이 방법.
삭제
삭제
제 22 항에 있어서, 상기 제 1 터치 입력은,
상기 투명 디스플레이 기기의 상기 화면상에 디스플레이 되고 있는 가이드 정보에 대한 터치 기반의 영역 조정 동작을 나타내고,
상기 가이드 정보에 대한 터치 기반의 영역 조정 동작에 대한 범위는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 윤곽선에 기초하는 정보 디스플레이 방법.
삭제
제 22 항에 있어서, 상기 제 2 위치 정보는 상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 객체의 윤곽선을 나타내는 정보 디스플레이 방법.
삭제
제 22 항에 있어서, 상기 제 2 터치 입력은 상기 투명 디스플레이 기기의 상기 화면상에 보이는 상기 객체에 대한 상기 투명 디스플레이 기기의 상기 화면상에 닫힌 영역을 나타내는 정보 디스플레이 방법.
제 22 항에 있어서, 상기 객체에 관한 정보는 상기 객체의 타입과 동일한 타입을 갖는 적어도 하나의 다른 객체에 관한 정보를 포함하고,
상기 적어도 하나의 다른 객체의 상기 외부 기기의 상기 화면상의 디스플레이 위치는 상기 객체의 상기 외부 기기의 상기 화면상의 디스플레이 위치와 다른 것을 특징으로 하는 정보 디스플레이 방법.
제 22 항에 있어서, 상기 방법은,
상기 투명 디스플레이 기기와 상기 외부 기기간의 인터랙션에 기초하여 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 되고 있는 상기 정보를 편집하는 단계를 더 포함하는 정보 디스플레이 방법.
투명 디스플레이 기기에 있어서,
상기 투명 디스플레이 기기를 통해 보이는 외부 기기의 제 1 위치 정보를 나타내는 제 1 터치 입력을 수신하고, 상기 외부 기기의 화면상에 디스플레이 되고 있는 객체의 제 2 위치 정보를 나타내는 제 2 터치 입력을 수신하도록 구성된 투명 디스플레이;
상기 외부 기기와 통신하도록 구성된 통신부; 및
상기 통신부를 통해, 상기 외부 기기의 스크린 사이즈 정보를 수신하고,
상기 통신부를 통해, 수신된 상기 외부 기기의 스크린 사이즈 정보에 기초한 상기 제 1 위치 정보와 상기 제 2 위치 정보의 좌표 정보를 포함하는 상기 객체에 관한 정보 요청을 상기 외부 기기로 전송하고,
상기 통신부를 통해, 상기 객체에 관한 정보 요청 전송에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하고,
상기 통신부를 통해, 수신된 상기 객체에 관한 정보를 상기 투명 디스플레이에 디스플레이 하도록 구성된 프로세서를 포함하는 투명 디스플레이 기기.
제 33 항에 있어서, 상기 제 1 위치 정보는 상기 투명 디스플레이를 통해 보이는 상기 외부 기기의 윤곽선을 나타내는 것을 특징으로 하는 투명 디스플레이 기기.
삭제
삭제
제 33 항에 있어서, 상기 제 1 터치 입력은 상기 투명 디스플레이상에 디스플레이 되고 있는 가이드 정보에 대한 터치 기반의 영역 조정 동작을 나타내고,
상기 가이드 정보에 대한 터치 기반의 영역 조정 동작의 범위는 상기 투명 디스플레이를 통해 보이는 상기 외부 기기의 윤곽선에 기초하는 투명 디스플레이 기기.
삭제
제 33 항에 있어서, 상기 제 2 위치 정보는 상기 투명 디스플레이를 통해 보이는 상기 객체의 윤곽선을 나타내는 것을 특징으로 하는 투명 디스플레이 기기.
삭제
제 33 항에 있어서, 상기 제 2 터치 입력은 상기 투명 디스플레이를 통해 보이는 상기 객체에 대한 상기 투명 디스플레이상의 닫힌 영역을 나타내는 것을 특징으로 하는 투명 디스플레이 기기.
제 33 항에 있어서, 상기 객체에 관한 정보는,
상기 객체의 타입과 같은 타입을 갖는 적어도 하나의 다른 객체에 관한 정보를 포함하고,
상기 적어도 하나의 다른 객체의 상기 외부 기기의 화면상의 디스플레이 위치는 상기 객체의 상기 외부 기기의 화면상의 디스플레이 위치와 다른 것을 특징으로 하는 투명 디스플레이 기기.
제 33 항에 있어서, 상기 프로세서는,
상기 통신부를 통한 상기 외부 기기와의 인터랙션에 기초하여 상기 투명 디스플레이에 디스플레이 되고 있는 상기 정보를 편집하도록 더 구성되는 투명 디스플레이 기기.
투명 디스플레이 기기상에 정보를 디스플레이하는 방법을 수행하도록 하는 명령어를 포함하는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체에 있어서,
상기 방법은,
상기 투명 디스플레이 기기와 외부 기기간의 통신을 통해 상기 외부 기기의 스크린 사이즈 정보를 수신하는 단계;
상기 투명 디스플레이 기기의 화면을 통해 보이는 상기 외부 기기의 제 1 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 1 터치 입력을 수신하는 단계;
상기 투명 디스플레이 기기의 상기 화면을 통해 보이는 상기 외부 기기의 화면에 디스플레이 되고 있는 객체의 제 2 위치 정보를 나타내는 상기 투명 디스플레이 기기의 상기 화면상에 제 2 터치 입력을 수신하는 단계;
상기 외부 기기의 상기 스크린 사이즈 정보에 기초하여 상기 제 1 위치 정보 및 상기 제 2 위치 정보의 좌표 정보를 포함하는 상기 객체에 관한 정보 요청을 상기 외부 기기로 전송하는 단계;
상기 객체에 관한 정보 요청 전송에 응답하여 상기 외부 기기로부터 상기 객체에 관한 정보를 수신하는 단계; 및
상기 수신된 객체에 관한 정보를 상기 투명 디스플레이 기기의 상기 화면에 디스플레이 하는 단계를 포함하는 기록 매체.
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제