KR102302327B1 - 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법 - Google Patents

단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법 Download PDF

Info

Publication number
KR102302327B1
KR102302327B1 KR1020140174695A KR20140174695A KR102302327B1 KR 102302327 B1 KR102302327 B1 KR 102302327B1 KR 1020140174695 A KR1020140174695 A KR 1020140174695A KR 20140174695 A KR20140174695 A KR 20140174695A KR 102302327 B1 KR102302327 B1 KR 102302327B1
Authority
KR
South Korea
Prior art keywords
information
external device
terminal device
picture
display
Prior art date
Application number
KR1020140174695A
Other languages
English (en)
Other versions
KR20160069144A (ko
Inventor
박시화
천시내
이도영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140174695A priority Critical patent/KR102302327B1/ko
Priority to PCT/KR2015/000429 priority patent/WO2016093420A1/en
Priority to US14/604,306 priority patent/US9332172B1/en
Publication of KR20160069144A publication Critical patent/KR20160069144A/ko
Application granted granted Critical
Publication of KR102302327B1 publication Critical patent/KR102302327B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/60—Subscription-based services using application servers or record carriers, e.g. SIM application toolkits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/20—Manipulation of established connections

Abstract

단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법이 개시된다. 단말 장치는 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하는 카메라부, 촬영된 사진으로부터 외부 장치를 감지하는 제어부, 데이터를 송수신하는 통신부 및 촬영된 사진을 디스플레이하는 디스플레이부를 포함하며, 제어부는 촬영된 사진 내의 감지된 외부 장치가 선택될 때, 외부 장치의 센싱 히스토리를 기반으로 외부 장치의 정보를 수신하도록 통신부를 제어하고, 수신된 외부 장치의 정보를 디스플레이부에 표시하도록 디스플레이부를 제어할 수 있다.

Description

단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법{TERMINAL DEVICE, INFORMATION DISPLAY SYSTEM AND CONTROLLING METHOD THEREOF}
본 명세서는 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법에 관한 것이다.
기술의 발전에 따라 다양한 전자 장치들이 개발되고 있다. 또한, 전자 장치들은 소형화, 고성능화가 됨에 따라 다양한 기능을 수행할 수 있다. 예를 들어, 사용자가 사진을 찍기 위해 야외로 나가는 경우, 과거에는 사용자가 핸드폰, 카메라, 위치 표시 장치를 가지고 다녀야 했다. 그러나, 요즈음 사용되는 스마트폰은 통신 기능, 카메라 기능, 위치 표시 기능 모두를 수행할 수 있기 때문에 사용자는 하나의 스마트폰만을 가지고 있으면 족하다.
한편, 최근에는 모든 사물을 네트워크로 연결하는 기술에 대한 연구가 시도되고 있다. 사물인터넷(Internet Of Things: IoT)이라고 부르는 이 기술은 인터넷을 기반으로 모든 사물을 연결하여 사람과 사물, 사물과 사물 간의 정보를 상호 소통하는 기술을 의미한다.
사물인터넷 기술은 다양한 기능을 수행할 수 있는 전자 장치에서 다양한 서비스를 제공할 수 있다. 이에 따라, 전자 장치에서 사물인터넷 기술을 기초로 다양하고 유용한 사용자 인터페이스(User Interface: UI) 또는 사용자 경험(User Experience: UX)이 필요하다.
본 명세서는 상술한 문제점을 해결하기 위해 안출된 것으로, 본 명세서의 목적은 사진 내에 객체로서 촬영된 외부 장치의 데이터를 확인하고 이용할 수 있는 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법을 제공하는 것이다.
상술한 목적을 달성하기 위한 일 실시 예에 따르면, 단말 장치는 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하는 카메라부, 상기 촬영된 사진으로부터 상기 외부 장치를 감지하는 제어부, 데이터를 송수신하는 통신부 및 상기 촬영된 사진을 디스플레이하는 디스플레이부를 포함하며, 상기 제어부는 상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 외부 장치의 정보를 상기 디스플레이부에 표시하도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는 기 설정된 거리 이내의 상기 외부 장치로부터 태깅 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 태깅 정보를 기초로 상기 외부 장치를 감지할 수 있다.
한편, 상기 태깅 정보는 상기 외부 장치의 고유 정보, 식별 정보, 위치 정보, 권한 정보 및 소유자 정보 중 적어도 하나의 정보를 포함할 수 있다.
그리고, 상기 제어부는 상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 사진이 촬영된 시점의 상기 외부 장치의 정보를 수신하도록 상기 통신부를 제어할 수 있다.
또한, 상기 제어부는 상기 촬영된 시점 이전 정보 및 상기 촬영된 시점 이후 정보 중 적어도 하나의 정보를 더 수신하도록 상기 통신부를 제어할 수 있다.
또한, 상기 제어부는 상기 표시된 정보의 전후 정보를 선택하는 지시자를 표시하도록 상기 디스플레이부를 제어할 수 있다.
한편, 상기 외부 장치의 정보는 상기 외부 장치의 사용 정보, 이동 경로 정보, 위치 정보, 컨텐츠 정보 및 리스트 정보 중 적어도 하나의 정보를 포함할 수 있다.
그리고, 상기 제어부는 상기 외부 장치가 차량인 경우, 상기 사진이 촬영된 시점의 위치 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
또한, 상기 제어부는 상기 차량의 이동 경로 정보를 지도 상에서 표시하도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는 상기 외부 장치가 컨텐츠 재생 장치인 경우, 상기 사진이 촬영된 시점의 컨텐츠 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는 상기 컨텐츠 재생 장치가 재생한 컨텐츠의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 컨텐츠의 리스트 정보 중 하나의 컨텐츠가 선택될 때, 상기 선택된 컨텐츠를 재생할 수 있다.
또한, 상기 제어부는 상기 컨텐츠 재생 장치가 재생한 컨텐츠의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 컨텐츠의 리스트 정보 중 하나의 컨텐츠가 선택될 때, 상기 선택된 컨텐츠의 재생 명령을 상기 컨텐츠 재생 장치로 전송하도록 상기 통신부를 제어할 수 있다.
한편, 상기 컨텐츠는 음원, 동영상 및 게임 중 적어도 하나일 수 있다.
한편, 상기 제어부는 상기 외부 장치가 스마트 액자인 경우, 상기 사진이 촬영된 시점의 상기 스마트 액자에 표시된 이미지의 정보를 표시하도록 상기 디스플레이부를 제어할 수 있다.
그리고, 상기 제어부는 상기 스마트 액자가 디스플레이한 이미지의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 이미지의 리스트 정보 중 하나의 이미지가 선택될 때, 상기 선택된 이미지를 상기 촬영 사진과 합성하여 디스플레이하도록 상기 디스플레이부를 제어할 수 있다.
또한, 상기 제어부는 상기 외부 장치의 소유자 정보를 기초로 상기 외부 장치의 소유자를 판단하고, 상기 외부 장치가 타인 소유일 때, 상기 외부 장치의 소유자에게 상기 외부 장치의 데이터를 요청할 수 있다.
상술한 목적을 달성하기 위한 일 실시 예에 따르면, 정보 표시 시스템은 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하고, 상기 촬영된 사진으로부터 상기 외부 장치를 감지하며, 상기 촬영된 사진을 디스플레이하고, 상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 요청하는 단말 장치 및 상기 단말 장치의 요청에 따라 상기 외부 장치의 정보를 상기 단말 장치로 전송하는 외부 장치를 포함하며, 상기 단말 장치는 상기 외부 장치의 정보를 수신하여 표시할 수 있다.
상술한 목적을 달성하기 위한 일 실시 예에 따르면, 단말 장치의 제어 방법은 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하는 단계, 상기 촬영된 사진으로부터 상기 외부 장치를 감지하는 단계, 상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 수신하는 단계 및 상기 수신된 외부 장치의 정보를 표시하는 단계를 포함할 수 있다.
그리고, 상기 외부 장치의 정보를 수신하는 단계는 상기 사진이 촬영된 시점의 상기 외부 장치의 정보를 수신할 수 있다.
또한, 상기 외부 장치의 정보를 수신하는 단계는 상기 촬영된 시점 이전 정보 및 상기 촬영된 시점 이후 정보 중 적어도 하나의 정보를 더 수신할 수 있다.
상술한 다양한 실시 예에 따르면, 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법은 사진 내에서 촬영된 외부 장치의 데이터를 확인하고 이용할 수 있다.
그리고, 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법은 촬영된 외부 장치의 히스토리 정보를 확인할 수 있다.
또한, 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법은 촬영된 외부 장치가 플레이했던 컨텐츠 정보를 이용하여 컨텐츠 정보에 포함한 하나의 컨텐츠를 컨텐츠를 선택하여 플레이할 수 있다.
또한, 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법은 촬영된 외부 장치의 컨텐츠 정보를 이용하여 외부 장치가 포함된 이미지의 일부 영역을 변경할 수 있다.
아울러, 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법은 촬영된 외부 장치가 타인 소유의 장치인 경우, 외부 장치의 소유자에게 외부 장치의 정보에 대한 접근 허가를 요청할 수 있다.
도 1은 일 실시 예에 따른 단말 장치의 블록도이다.
도 2는 다른 실시 예에 따른 단말 장치의 블록도이다.
도 3은 일 실시 예에 따른 정보 표시 시스템을 설명하는 도면이다.
도 4는 다른 실시 예에 따른 정보 표시 시스템을 설명하는 도면이다.
도 5는 외부 장치의 히스토리 정보의 일 실시 예를 설명하는 도면이다.
도 6은 외부 장치의 히스토리 정보의 다른 실시 예를 설명하는 도면이다.
도 7은 외부 장치의 히스토리 정보를 이용하는 제1 실시 예를 설명하는 도면이다.
도 8은 외부 장치의 히스토리 정보를 이용하는 제2 실시 예를 설명하는 도면이다.
도 9는 외부 장치의 히스토리 정보를 이용하는 제3 실시 예를 설명하는 도면이다.
도 10은 외부 장치의 히스토리 정보를 이용하는 제4 실시 예를 설명하는 도면이다.
도 11은 외부 장치의 히스토리 정보를 이용하는 제5 실시 예를 설명하는 도면이다.
도 12는 외부 장치의 히스토리 정보를 이용하는 제6 실시 예를 설명하는 도면이다.
도 13은 타인의 외부 장치에게 정보를 요청하는 실시 예를 설명하는 도면이다.
도 14는 일 실시 예에 따른 단말 장치의 제어 방법의 흐름도이다.
이하 상술한 목적을 구체적으로 실현할 수 있는 본 명세서의 바람직한 실시 예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 명세서의 구성과 작용은 적어도 하나의 실시 예로서 설명되는 것이며, 이것에 의해서 본 명세서의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.
본 명세서에서 사용되는 용어는 본 명세서에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 명세서의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 명세서의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.
도 1은 일 실시 예에 따른 단말 장치의 블록도이다.
도 1을 참조하면, 단말 장치(100)는 카메라부(110), 통신부(120), 디스플레이부(130) 및 제어부(140)를 포함할 수 있다.
카메라부(110)는 네트워크에 연결된 외부 장치를 포함하는 사진을 촬영할 수 있다. 일 실시 예로서, 네트워크에 연결된 외부 장치는 사물 인터넷(Internet Of Things: IoT) 장치일 수 있다. 외부 장치는 센서 모듈과 통신 모듈을 포함할 수 있다. 외부 장치는 센서 모듈을 이용하여 정보를 감지할 수 있다. 외부 장치는 저장 모듈을 더 포함할 수 있다. 따라서, 외부 장치는 감지된 정보를 저장 모듈에 저장할 수 있고, 외부 장치의 기본적인 정보 등을 저장할 수도 있다. 예를 들어, 외부 장치의 기본적인 정보는 고유 정보, 식별 정보, 권한 정보 또는 소유자 정보 등을 포함할 수 있다. 외부 장치의 감지된 정보는 사용 정보, 이동 경로 정보, 위치 정보, 컨텐츠 정보 또는 리스트 정보 등을 포함할 수 있다. 외부 장치의 기본적인 정보와 감지된 정보는 복수 개의 정보를 포함할 수도 있다. 외부 장치는 서버, 다른 외부 장치 또는 단말 장치로 다양한 정보를 송수신할 수 있다. 외부 장치는 복수 개 존재할 수 있다. 카메라부(110)는 외부 장치를 촬영할 수 있다.
제어부(140)는 촬영된 사진 내에 포함된 외부 장치를 감지할 수 있다. 일 실시 예로서, 제어부(140)는 이미지 처리 방식을 이용하여 외부 장치를 인식하여 감지할 수 있다. 제어부(140)는 사진 내의 객체인 외부 장치의 윤곽선 및 색상 등을 감지할 수 있다. 제어부(140)는 감지된 정보를 기초로 외부 장치의 종류 등을 인식할 수 있다. 제어부(140)는 인식된 정보를 기초로 주변에 위치한 외부 장치의 태깅 정보를 요청하여 수신할 수 있다. 제어부(140)는 수신한 외부 장치의 태깅 정보를 기초로 사진 내의 외부 장치를 감지할 수 있다.
또는, 제어부(140)는 감지한 외부 장치의 윤곽선 및 색상 등의 정보 및 단말 장치(100)의 위치 정보를 서버로 전송할 수 있다. 서버는 단말 장치(100) 및 외부 장치의 태깅 정보 등을 수신하여 저장할 수 있다. 서버는 단말 장치(100)로부터 수신한 외부 장치의 윤곽선 및 색상 등의 정보와 위치 정보를 기초로 대응되는 외부 장치의 태깅 정보를 검색할 수 있다. 서버는 단말 장치(100)의 위치와 가장 가깝고, 수신한 윤곽선 및 색상 등의 정보와 매칭되는 외부 장치에 대한 태깅 정보를 단말 장치(100)로 전송할 수 있다. 제어부(140)는 수신한 외부 장치의 태깅 정보를 기초로 사진 내의 외부 장치를 감지할 수 있다.
외부 장치의 태깅 정보는 외부 장치를 다른 장치와 구별하거나 외부 장치와 관련된 정보를 의미할 수 있다. 예를 들어, 태깅 정보는 외부 장치의 고유 정보, 식별 정보, 위치 정보, 권한 정보 또는 소유자 정보 등을 포함할 수 있다. 태깅 정보는 복수 개의 정보를 포함할 수 있다.
통신부(120)는 데이터를 송수신할 수 있다. 상술한 바와 같이, 통신부(120)는 외부 장치 또는 서버와 데이터를 송수신할 수 있다. 디스플레이부(130)는 사용자의 명령에 따라 촬영된 사진을 디스플레이할 수 있다. 디스플레이부(130)는 터치 센서와 함께 구현되어 사용자의 터치 입력을 받을 수도 있다.
제어부(140)는 촬영된 사진 내에서 감지된 외부 장치가 선택될 때, 외부 장치의 센싱 히스토리를 기반으로 외부 장치의 정보를 수신하도록 통신부(120)를 제어할 수 있다. 제어부(140)는 촬영된 사진 내의 외부 장치 상에서 입력되는 사용자의 터치 명령을 외부 장치의 선택 명령으로 인지할 수 있다. 외부 장치가 선택되면, 제어부(140)는 선택된 외부 장치에게 정보를 요청한다. 일 실시 예로서, 제어부(140)가 요청하는 외부 장치의 정보는 외부 장치의 사용 정보, 이동 경로 정보, 위치 정보, 컨텐츠 정보 또는 리스트 정보 등일 수 있다. 외부 장치는 동작을 수행할 때마다 수행한 동작과 관련된 정보를 저장하거나 서버로 전송할 수 있다. 예를 들어, 외부 장치가 조미료통인 경우, 조미료통은 저장된 조미료의 종류, 조미료통이 사용된 시간, 조미료통이 사용된 횟수, 실제 사용된 조미료의 양 등과 같은 정보를 감지하여 저장하거나 서버로 전송할 수 있다. 외부 장치가 TV인 경우, TV는 턴-온 시간, 턴-오프 시간, 디스플레이한 컨텐츠에 대한 정보, 디스플렝이한 방송과 관련된 정보 등을 저장하거나 서버로 전송할 수 있다. 외부 장치가 차량인 경우, 차량은 운행 시작 시간, 운행 종료 시간, 운행 거리, 차량의 위치, 사용 연료량 등의 정보를 감지하여 저장하거나 서버로 전송할 수 있다.
한편, 외부 장치의 수행 동작과 관련된 정보는 외부 장치가 감지한 정보를 포함할 수 있다. 그리고, 외부 장치의 수행 동작과 관련된 정보는 리스트 형태이거나 감지 정보의 히스토리일 수 있다. 외부 장치는 단말 장치(100)로 수행 동작과 관련된 정보를 전송할 수 있다. 외부 장치는 단말 장치(100)로부터 정보 요청을 받은 시점에 가지고 있는 복수의 정보를 한꺼번에 전송할 수 있다. 또는, 외부 장치는 단말 장치(100)로부터 요청받은 정보만을 전송할 수도 있다. 예를 들어, 외부 장치가 13:10, 14:20, 15:30에 각각 감지한 정보를 가지고 있다면, 외부 장치는 13:10, 14:20, 15:30에 각각 감지한 정보 모두를 한꺼번에 단말 장치(100)로 전송할 수 있다. 또는 외부 장치는 13:10에 감지한 정보를 요청받으면 13:10에 감지한 정보만을, 14:20에 감지한 정보를 요청받으면 14:20에 감지한 정보만을 전송할 수도 있다.
제어부(140)는 수신된 외부 장치의 정보를 디스플레이에 표시하도록 디스플레이부를 제어할 수 있다.
한편, 외부 장치를 포함하는 사진 촬영 과정 및 촬영된 사진의 디스플레이 과정은 서로 다른 단말 장치에서 수행될 수 있다. 예를 들어, 제1 단말 장치는 외부 장치를 포함하는 사진을 촬영할 수 있다. 제1 단말 장치는 촬영된 사진을 서버 또는 제2 단말 장치로 전송할 수 있다. 제2 단말 장치는 촬영된 사진을 제1 단말 장치 또는 서버로부터 수신하고 디스플레이할 수 있다. 이 경우, 제1 단말 장치는 카메라부를 통해 네트워크에 연결된 외부 장치를 포함하는 사진을 촬영할 수 있다. 제1 단말 장치의 제어부는 촬영된 사진으로부터 외부 장치를 감지할 수 있다. 제1 단말 장치의 통신부는 필요한 정보를 송수신할 수 있다. 제1 단말 장치는 외부 장치로부터 필요한 정보를 수신하거나 서버로부터 필요한 정보를 수신할 수 있다. 제1 단말 장치가 사진을 촬영하거나 외부 장치를 감지하는 과정은 상술한 과정과 동일할 수 있다.
제2 단말 장치는 촬영된 사진을 수신하여 디스플레이할 수 있다. 제2 단말 장치의 통신부는 촬영된 사진 내에서 감지된 외부 장치가 선택되면, 외부 장치의 센싱 히스토리를 기반으로 외부 장치의 정보를 수신할 수 있다. 제2 단말 장치의 디스플레이부는 수신된 외부 장치의 정보를 디스플레이할 수 있다. 제2 단말 장치의 제어부는 정보를 수신하고 디스플레이할 수 있도록 통신부 및 디스플레이부를 제어할 수 있다.
도 2는 다른 실시 예에 따른 단말 장치의 블록도이다.
도 2를 참조하면, 단말 장치는 카메라부(110), 통신부(120), 디스플레이부(130), 제어부(140), 입력부(150), 오디오부(160), 센서부(170), 저장부(180) 및 파워부(190)를 포함할 수 있다.
카메라부(110)는 네트워크에 연결된 외부 장치를 촬영할 수 있다. 카메라부(110)는 단말 장치의 주변 환경의 이미지를 촬영하여 전기적 신호로 변환한다. 이를 위해 카메라부(110)는 광학 신호를 전기적 신호로 변환할 수 있는 이미지 센서를 포함할 수 있다. 카메라부(110)에서 촬영되어 전기적 신호로 변환된 이미지는 저장부(180)에 저장된 후 제어부(140)로 출력되거나, 저장없이 바로 제어부(140)로 출력될 수도 있다. 또한 카메라부(110)에 의해 촬영되는 이미지는 정지 영상이 될 수도 있고, 동영상이 될 수도 있다. 카메라부(110)는 모션 센서 또는 비디오 센서로 사용될 수도 있다. 카메라부(110)는 필요에 따라 복수의 카메라를 포함할 수 있다.
통신부(120)는 외부 장치 또는 서버와 다양한 프로토콜을 사용하여 통신을 수행하고 데이터를 송수신할 수 있다. 외부 장치는 이동 단말기가 될 수도 있고, 고정 단말기가 될 수도 있다. 예를 들어, 이동 단말기는 휴대폰, 스마트폰, 태블릿 PC(Personal Computer), 스마트 패드, 노트북, 디지털 방송용 단말기, 개인 정보 단말기(Personal Digital Assistants: PDA), PMP(Portable Multimedia Player), 디지털 카메라, 네비게이션, 라디오 등이 될 수 있고, 고정 단말기는 데스크 탑, DVD (Digital Video Disc or Digital Versatile Disc) 플레이어, TV, 레코드 플레이어, 쥬크박스 등이 될 수 있다. 또한, 외부 장치는 일반적인 전자 장치 외에 IoT 장치를 포함할 수도 있다. IoT 장치는 센서 모듈 및 통신 모듈을 포함하는 모든 사물이 될 수 있다. 즉, 센서 모듈을 이용하여 정보를 감지하고, 통신 모듕을 이용하여 정보를 전송할 수 있는 모든 사물이 IoT 장치일 수 있다. 예를 들어, 센서 모듈과 통신 모듈을 포함한다면, 식당의 양념통, 도마, 접시, 프라이팬, 컵, 차량, 꽃병, 우산, 액자, 화장품, 필통, 수첩, 병 등도 IoT 장치가 될 수 있다. 상술한 이동 단말기 및 고정 단말기도 IoT 장치가 될 수 있음은 당연하다.
다양한 프로토콜은 유선 또는 무선 통신 프로토콜이 될 수 있다. 유선 통신인 경우, 통신부(120)는 외부 장치와 유선 데이터 전송 통신을 가능하게 하는 다양한 입출력 인터페이스(미도시)를 포함할 수 있다. 예를 들면, 인터페이스는 USB(Universal Serial Bus), HDMI(High Definition Multimedia Interface), DVI(Digital Visual Interface), IEEE 1394, 또는 데이터 전송과 관련된 다른 유사 규격에 따른 데이터 전송을 고려한 인터페이스를 포함할 수 있다. 무선 통신인 경우, 통신부(120)는 인터넷, LAN(Local Area Network), WAN(Wide Area Network) 등의 외부 통신망으로의 무선 접속을 고려한 RF 전기회로망을 포함할 수 있다. 통신부(120)에 의해 접속되는 무선 통신망은 GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment, CDMA(Code Division Multiple Access), W-CDMA(Wideband Code Division Multiple Access), TDMA(Time Division Multiple Access), Wibro, 그 외에 HSPA (High Speed Packet Access), HSDPA(High Speed Downlink Packet Access), LTE (Long Term Evolution) 등의 이동 통신 방식 또는 블루투스, RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, WLAN(Wireless LAN)(Wi-Fi) 등의 근거리 통신 방식의 인터페이스가 지원될 수 있다.
여기서 유/무선 인터페이스 방식은 본 명세서의 이해를 돕기 위한 실시예들이며, 정보를 송/수신하기 위한 인터페이스 방식은 당업자에 의해 용이하게 변경될 수 있으므로 본 명세서에서 인터페이스 방식은 상술한 실시예들로 한정되지 않을 것이다.
디스플레이부(130)는 디스플레이 화면에 이미지를 출력할 수 있다. 디스플레이부(130)는 제어부(140)에서 실행되는 컨텐츠 또는 제어 명령에 기초하여 이미지를 출력할 수 있다. 본 명세서에서 디스플레이부(130)는 외부 장치를 포함하는 촬영된 사진을 출력할 수 있다. 한편, 디스플레이부(130)는 헤드마운트디스플레이의 디스플레이 유닛 또는 빔 프로젝터와 같은 형태로 구현될 수도 있다.
제어부(140)는 저장부(180)에 저장된 컨텐츠, 또는 데이터 통신을 통해 수신된 컨텐츠 등을 실행할 수 있다. 또한, 제어부(140)는 다양한 애플리케이션을 실행하고, 단말 장치 내부의 데이터를 프로세싱할 수 있다. 또한, 제어부(140)는 상술한 단말 장치의 각 구성들을 제어하며, 각 구성들 간의 데이터 송수신을 제어할 수도 있다. 제어부(140)는 이하 상세하게 설명될 다양한 제어 로직을 실행하기 위해 관련된 기술분야에 알려진 프로세서, ASIC(application-specific integrated circuit), 다른 칩셋, 논리 회로, 레지스터, 통신 모뎀, 데이터 처리 장치 등을 포함할 수 있다. 또한, 상술한 제어 로직이 소프트웨어로 구현될 때, 제어부(140)는 프로그램 모듈의 집합으로 구현될 수 있다. 이때, 프로그램 모듈은 저장부(180)에 저장되고, 프로세서에 의해 실행될 수 있다.
입력부(150)는 외부로부터 사용자 명령을 입력받을 수 있다. 입력부(150)는 다양한 방식으로 구현될 수 있다. 예를 들어, 입력부(150)는 키보드, 키패드, 마우스, 터치패드, 버튼, 소프트키 등으로 구현될 수 있다. 넓은 의미로 입력부(150)는 마이크, 터치 스크린 등을 포함할 수 있다. 마이크는 사용자의 음성을 입력받을 수 있고, 터치 스크린은 사용자의 터치 제스처를 입력받을 수 있다. 경우에 따라, 마이크는 오디오부(160)에 포함시킬 수 있고, 터치 스크린은 디스플레이부(130)에 포함시킬 수 있다.
오디오부(160)는 스피커 등의 오디오 출력 수단 및 마이크 등의 오디오 입력 수단을 포함할 수 있다. 출력 수단은 단말 장치에서 실행 중인 컨텐츠의 오디오 신호를 출력할 수 있다. 컨텐츠는 저장부(180)로부터 제공받을 수도 있고, 외부 장치로부터 통신부(120)를 통해 제공받을 수도 있다. 출력 수단은 공기 전도 스피커와 골전도 스피커 중 적어도 하나를 포함할 수 있다. 공기 전도 스피커는 이어폰 등이 해당된다. 공기 전도 스피커는 오디오 신호에 따라 공기를 진동시켜 음파를 발생시킨다. 즉, 공기로 전해지는 소리의 진동은 귓속에 있는 고막으로 전달되고, 고막의 진동은 고막 속에 자리 잡고 있는 3개의 뼈를 통해 나사 모양의 와우에 전달된다. 와우에는 림프액이라는 액체가 차 있고, 이 액체의 진동이 전기 신호로 바뀌면서 청각 신경에 전달되어 사람의 뇌는 소리를 인식한다. 골전도 스피커는 주파수 형태의 진동으로 변환된 오디오 신호를 사용자에게 원할하게 제공할 수 있는 다양한 위치에 배치될 수 있다. 만일 골전도 스피커를 이용한다면, 오디오 신호는 골전도 스피커를 구동시킴으로써, 골전도 음파가 사용자의 두개골에 전도되어 주파수 형태의 진동이 사용자의 내이로 전달되게 된다. 골전도 스피커를 이용하면 사용자는 고막에 무리없이 오디오 신호를 들을 수 있게 된다. 한편, 오디오부(160)는 오디오 센서로 사용될 수도 있다.
센서부(170)는 단말 장치에 장착된 적어도 하나의 센서를 사용하여 단말 장치의 주위 환경을 감지하고 이를 제어부(140)로 전달할 수 있다. 또한, 센서부(170)는 사용자 입력을 감지하고 이를 제어부(140)로 전달할 수 있다. 이때, 센서부(170)는 적어도 하나의 센싱 수단을 포함할 수 있다. 예를 들어, 센싱 수단은 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 밝기 센서, 고도 센서, 후각 센서, 온도 센서, 뎁스 센서, 압력 센서, 밴딩 센서, 오디오 센서, 비디오 센서, GPS(Global Positioning System) 센서, 터치 센서, 지문 센서 등의 다양한 센싱 수단을 포함할 수 있다. 센서부(170)는 상술한 다양한 센싱 수단을 통칭하는 것으로, 사용자의 다양한 입력 및 사용자의 환경을 센싱하여, 제어부(140)가 그에 따른 작동을 수행할 수 있도록 센싱 결과를 전달할 수 있다. 상술한 센싱 수단들은 별도의 엘리먼트로 단말 장치에 포함되거나, 적어도 하나 이상의 엘리먼트로 통합되어 포함될 수 있다.
한편, 단말 장치는 센서부(170)를 디스플레이부(130) 상에 함께 구비할 수 있다. 이에 따라, 단말 장치는 디스플레이부(130) 상에 수행되는 다양한 사용자 입력을 센서부(170)를 통해 감지할 수 있다. 예를 들어, 센서부(170)가 터치 센서를 포함할 경우, 단말 장치는 디스플레이부(130) 상에서 수행되는 사용자의 다양한 터치 입력을 수신할 수 있다. 또한, 센서부(170)가 지문 센서를 포함할 경우, 단말 장치는 디스플레이부(130) 상에서 수행되는 사용자 입력으로부터 해당 사용자의 지문 정보를 수집할 수 있다. 이와 같이, 단말 장치는 디스플레이부(130)와 센서부(170)가 상호 레이어 구조를 이루는 스크린 센서를 구비할 수 있다.
저장부(180)는 비디오, 오디오, 사진, 애플리케이션 등 다양한 디지털 데이터를 저장할 수 있다. 어플리케이션은 제어부(140)의 동작을 위한 프로그램일 수 있다. 또한, 비디오 또는 사진은 카메라부(110)를 통해 획득한 데이터일 수 있다. 저장부(180)는 RAM(Random Access Memory), SRAM(Static Random Access Memory), ROM(Read Only Memory), EEPROM(Electrically Erasable Programmable Read Only Memory), PROM(Programmable Read Only Memory) 등의 형태로 구현될 수 있다. 또한, 저장부(180)는 인터넷(internet) 상에서 웹 스토리지(web storage)와 관련되어 동작하여 저장 기능을 수행할 수도 있다. 또한 저장부(180)는 단말 장치에 착탈 가능한 외부 저장 매체를 더 포함할 수 있다. 외부 저장 매체는 SD(Secure Digital)나 CF(Compact Flash) 메모리와 같은 슬롯 형태, 메모리 스틱 형태, USB(Universal Serial Bus) 형태 등이 가능하다. 즉, 외부 저장 매체는 단말 장치에 착탈 가능하고, 오디오, 사진, 동영상, 어플리케이션 등과 같은 컨텐츠를 단말 장치에 제공할 수 있다. 예를 들어, 저장부(180)는 램(RAM), 롬(ROM), 캐쉬 메모리, 하드 디스크 드라이브(HDD), 솔리드 스테이트 드라이브(SSD), CD, DVD, 블루레이 디스크, 플로피 디스크(FDD), 자기 디스크, 메모리 카드, 플래쉬 메모리, USB 메모리 등을 포함할 수 있다.
파워부(190)는 배터리 또는 외부 전원과 연결되는 파워 소스로서, 단말 장치에 전력을 공급할 수 있다. 배터리는 일차 전지뿐만 아니라 이차 전지를 포함한다. 이차 전지의 경우, 재충전이 가능한 리튬 이온 전지, 리튬 폴리머 전지, 니켈 카드늄 전지, 니켈 수소 전지, 니켈 아연 전지 등으로 구성될 수 있다.
한편, 단말 장치는 디지털 데이터를 처리하고 이에 대응한 동작을 수행할 수 있는 다양한 형태의 장치를 의미할 수 있다. 이러한 단말 장치의 성능이 향상됨에 따라, 단말 장치를 통해 다양한 컨텐츠의 실행이 가능하다. 예를 들어, 단말 장치는 TV, 랩탑 컴퓨터, 데스크탑 컴퓨터, 모니터, 스마트폰, 태블릿 PC, 네비게이터, PMP, 결제용 단말기, 보안용 단말기, 키오스크 등을 포함할 수 있다. 특히, 최근 널리 사용되고 있는 포터블 디바이스는 종합적인 멀티미디어 컨텐츠의 재생 장치로도 활용되고 있다.
지금까지 단말 장치의 블록도에 대해 설명하였다. 아래에서는 정보 표시 시스템 및 구체적인 실시 예를 설명한다.
도 3은 일 실시 예에 따른 정보 표시 시스템을 설명하는 도면이다.
도 3을 참조하면, 정보 표시 시스템은 단말 장치(100), 외부 장치(200a, 200b, 200c, 200d)를 포함할 수 있다. 외부 장치(200)는 하나만 존재할 수 있고, 복수 개 존재할 수도 있다. 외부 장치(200)는 네트워크에 연결되어 단말 장치와 정보를 교환할 수 있다.
먼저, 각각의 외부 장치(200)는 센서 모듈 및 통신 모듈을 포함할 수 있다. 외부 장치(200)는 센서 모듈을 이용해서 정보를 감지할 수 있다. 예를 들어, TV는 턴-온 또는 턴-오프 시간, 채널 정보, 서비스를 제공한 컨텐츠에 대한 정보, 시청 시간 등의 정보를 감지할 수 있다. 오디오 장치는 턴-온 또는 턴-오프 시간, 제공한 서비스 종류, 서비스 제공 시간, 컨텐츠에 대한 정보, 등의 정보를 감지할 수 있다. 프라이팬은 사용된 시간, 가열 온도 등의 정보를 감지할 수 있고, 화분은 온도, 습도 등의 정보를 감지할 수 있다. 외부 장치(200)는 고유 정보와 함께 감지한 정보를 태깅하여 정보 그룹을 생성할 수 있다. 즉, 외부 장치(200)는 고유 정보, 식별 정보, 권한 정보, 소유자 정보, 위치 정보 등과 함께 감지한 정보를 태깅 정보로 생성할 수 있다. 감지 정보의 종류는 외부 장치(200)에 따라 달라질 수 있다. 외부 장치(200)는 저장 모듈을 더 포함하여 감지한 정보를 저장할 수도 있다.
단말 장치(100)는 외부 장치를 객체로 하여 사진을 촬영할 수 있다. 단말 장치(100)는 촬영된 사진 내에 포함된 외부 장치(200)를 감지할 수 있다. 일 실시 예로서, 단말 장치(100)는 촬영된 사진 내의 외부 장치의 윤곽선 및 색상 등을 인식할 수 있다. 단말 장치(100)는 주변의 외부 장치와 통신을 하여 촬영된 사진 내에 포함된 외부 장치가 어떤 장치인지 감지할 수 있다. 예를 들어, 단말 장치(100)는 사진에 포함된 외부 장치의 외형 정보를 주변의 외부 장치(200)로 전송하고 매칭 여부를 문의할 수 있다. 외부 장치(200)는 단말 장치(100)로부터 수신한 외형 정보가 자신의 정보와 일치하면 매칭된다는 응답 신호를 단말 장치(100)로 전송할 수 있다. 단말 장치(100)는 외부 장치(200)로부터 수신한 응답 신호로 사진 내의 외부 장치가 어떤 장치인지 인식할 수 있다. 외부 장치(200)는 매칭된다는 응답 신호와 함께 자신의 태깅 정보를 함께 단말 장치(100)로 전송할 수도 있다.
다른 예로서, 단말 장치(100)는 주변의 외부 장치(200)에게 태깅 정보를 요청할 수 있다. 외부 장치(200)는 단말 장치(100)의 요청에 따라 태깅 정보를 전송할 수 있다. 단말 장치(100)는 수신한 태깅 정보와 외부 장치의 인식한 외형 정보를 비교하여 매칭 여부를 확인할 수 있다. 단말 장치(100)는 매칭되는 외부 장치의 태깅 정보를 기초로 사진 내의 외부 장치를 감지할 수 있다. 단말 장치(100)는 사진 내의 외부 장치를 인식하면, 인식된 외부 장치의 정보를 사진에 태깅하여 저장할 수 있다. 단말 장치(100)는 일정 거리 이내의 외부 장치(200)와 통신을 수행할 수 있다. 외부 장치(200)와의 거리는 외부 장치(200)의 위치 정보 또는 외부 장치(200)로부터 수신한 신호의 세기 등을 기초로 인식할 수 있다. 다만, 일정 거리는 일반적으로 인식되는 명확한 거리의 개념이라기보다 임의로 설정한 대략적인 거리의 개념일 수 있다.
단말 장치(100)는 외부 장치가 포함된 사진을 디스플레이할 수 있다. 경우에 따라, 외부 장치가 포함된 사진은 다른 단말 장치로 전송될 수 있다. 즉, 외부 장치를 포함하는 사진을 촬영한 단말 장치(100)와 사진을 디스플레이하는 단말 장치(100)는 동일한 단말 장치일 수 있고, 서로 다른 단말 장치일 수도 있다.
단말 장치(100)가 외부 장치를 포함하는 사진을 디스플레이할 때, 사용자로부터 외부 장치를 선택하는 명령을 입력받을 수 있다. 외부 장치의 선택 명령은 터치 스크린 상에서 터치 제스처를 통해 입력받을 수 있고, 마우스와 같은 입력 수단을 통해 입력받을 수도 있다. 경우에 따라, 단말 장치(100)는 카메라와 같은 입력 수단을 통한 사용자 시선을 입력받거나 마이크와 같은 입력 수단을 통한 음성을 입력받아 사진 내의 외부 장치를 선택할 수 있다.
단말 장치(100)는 사진 내의 외부 장치가 선택되면, 선택된 외부 장치(200)에게 센싱 정보를 요청할 수 있다. 선택된 외부 장치(200)는 단말 장치(100)에게 센싱 정보를 전송할 수 있다. 선택된 외부 장치(200)는 센싱 히스토리에 기초하여 센싱 정보를 전송할 수 있다. 즉, 선택된 외부 장치(200)는 사진이 촬영된 시점의 센싱 정보, 촬영된 시점 이전의 센싱 정보 및 촬영된 시점 이후의 센싱 정보 등을 함께 전송할 수 있다. 또는, 선택된 외부 장치(200)는 사진이 촬영된 시점의 센싱 정보, 촬영된 시점 이전의 센싱 정보 및 촬영된 시점 이후의 센싱 정보 중 요청받은 센싱 정보만을 전송할 수도 있다.
단말 장치(100)는 수신한 외부 장치의 센싱 정보를 표시할 수 있다. 한편, 외부 장치(200)는 센싱 정보를 서버로 전송하고, 단말 장치(100)는 서버에 연결하여 필요한 센싱 정보를 수신할 수도 있다.
도 4는 다른 실시 예에 따른 정보 표시 시스템을 설명하는 도면이다.
도 4를 참조하면, 정보 표시 시스템은 단말 장치(100), 외부 장치(200) 및 서버(300)를 포함할 수 있다. 도 4에는 하나의 외부 장치가 도시되어 있지만, 외부 장치(200)는 하나 이상 존재할 수 있다. 서버(300)는 단말 장치(100) 및 외부 장치(200)와 네트워크로 연결되어 정보를 교환할 수 있다.
도 3에서 설명한 바와 같이, 외부 장치(200)는 센서 모듈을 이용하여 정보를 감지할 수 있다. 외부 장치(200)는 감지한 정보를 통신 모듈을 이용하여 정보를 서버(300)로 전송할 수 있다. 서버(300)는 외부 장치(200)로부터 수신한 정보를 저장할 수 있다. 서버(300)는 외부 장치(200)로부터 정보를 수신할 때, 기존에 정보를 전송한 외부 장치(200)인지 여부를 판단할 수 있다. 기존에 정보를 전송한 외부 장치(200)이면, 기존 정보에 부가하여 수신한 정보를 저장할 수 있다. 따라서, 서버(300)는 하나의 외부 장치(200)와 관련된 히스토리 정보를 생성할 수 있다.
단말 장치(100)는 외부 장치를 객체로 하여 사진을 촬영할 수 있다. 단말 장치(100)는 촬영된 사진 내에 포함된 외부 장치(200)를 감지할 수 있다. 일 실시 예로서, 단말 장치(100)는 촬영된 사진 내의 외부 장치의 윤곽선 및 색상 등을 인식할 수 있다. 단말 장치(100)는 인식한 외부 장치의 외형 정보를 서버(300)로 전송할 수 있다. 서버(300)는 단말 장치(100)부터 수신한 외부 장치의 외형 정보와 매칭되는 저장된 외부 장치의 정보를 검색할 수 있다. 서버(300)는 매칭되는 외부 장치의 정보를 단말 장치(100)로 전송할 수 있다. 단말 장치(100)는 서버(300)로부터 수신한 외부 장치의 정보를 기초로 촬영된 외부 장치를 감지할 수 있다.
또는, 단말 장치(100)는 서버(300)로 주변의 외부 장치에 대한 정보를 요청할 수 있다. 서버(300)는 단말 장치(100)의 요청에 따라 단말 장치(100) 주변의 외부 장치(200)에 대한 정보를 전송할 수 있다. 서버(300)는 외부 장치(200)의 모든 정보를 전송할 수도 있고, 외부 장치(200)를 식별하는데 필요한 정보만을 전송할 수도 있다. 예를 들어, 외부 장치(200)를 식별하는데 필요한 정보는 고유 정보, 식별 정보, 위치 정보, 색상 정보, 종류 정보, 형태 정보 중 적어도 하나의 정보일 수 있다. 고유 정보 또는 식별 정보는 각 외부 장치(200)의 고유한 정보 또는 다른 외부 장치와 식별할 수 있는 정보를 의미할 수 있다. 종류 정보는 외부 장치의 종류에 관한 정보를 의미할 수 있다.
단말 장치(100)는 수신한 외부 장치의 정보 중에서 인식한 외부 장치의 정보와 매칭되는 정보를 검색할 수 있다. 단말 장치(100)는 검색된 정보로부터 외부 장치(200)를 감지할 수 있다. 한편, 단말 장치(100)는 자신의 정보를 서버(300)로 전송할 수 있다. 서버(300)는 수신한 단말 장치(100)의 정보를 저장할 수 있다.
단말 장치(100)는 외부 장치가 포함된 사진을 디스플레이할 수 있다. 경우에 따라, 외부 장치가 포함된 사진은 다른 단말 장치로 전송될 수 있다. 즉, 외부 장치를 포함하는 사진을 촬영한 단말 장치(100)와 사진을 디스플레이하는 단말 장치(100)는 동일한 단말 장치일 수 있고, 서로 다른 단말 장치일 수도 있다.
도 4에서는 단말 장치(100)와 외부 장치(200)의 정보 교환은 서버(300)를 매개체로 이루어질 수 있다. 서버(300)를 통해 정보 교환이 이루어진다는 점만 제외하고 단말 장치(100) 또는 외부 장치(200)의 동작은 도 3에서 설명한 바와 동일한 동작일 수 있다.
도 5는 외부 장치의 히스토리 정보의 일 실시 예를 설명하는 도면이다.
도 5를 참조하면, 시간과 프로그램 정보를 포함하는 히스토리 정보가 도시되어 있다. 외부 장치는 외부 장치의 종류와 상관없이 동일한 속성의 정보를 가질 수 있다. 예를 들어, 고유 정보, 식별 정보, 위치 정보, 종류 정보, 모양 정보, 동작 정보, 사용 정보 등은 모든 외부 장치가 가지고 있는 정보일 수 있다. 또한, 외부 장치는 외부 장치의 종류에 따라 개별적인 정보를 가질 수 있다. 예를 들어, 조미료통과 같은 외부 장치는 성분 정보를 더 가질 수 있다. 컨텐츠 재생 장치와 같은 외부 장치는 프로그램 정보를 더 가질 수 있다. 예를 들어, 컨텐츠 재생 장치는 라디오, TV, DVD 플레이어, CD 플레이어, 스마트 폰, 태블릿 PC, 전자 액자 등을 포함할 수 있다.
도 5에는 컨텐츠 재생 장치가 가질 수 있는 사용 정보에 대한 실시 예가 도시되어 있다. 사용자의 명령에 따라 컨텐츠 재생 장치는 특정 컨텐츠를 재생할 수 있다. 컨텐츠 재생 장치는 컨텐츠 재생 시간과 종류에 관한 정보를 감지할 수 있다. 감지된 정보는 컨텐츠 재생 장치에 저장할 수 있고, 서버로 전송할 수도 있다. 일 실시 예로서, 컨텐츠 재생 장치는 9시부터 10시까지 aaa라는 프로그램을 재생한 경우, 9시부터 10시까지 aaa 프로그램 재생이라는 정보를 생성하여 저장하거나 서버로 전송할 수 있다. 이후에 컨텐츠 재생 장치는 10시10분부터 11시50분까지 bbb라는 프로그램을 재생할 수 있다. 컨텐츠 재생 장치는 10시10분부터 11시50분까지 bbb 프로그램 재생이라는 정보를 생성하여 저장하거나 서버로 전송할 수 있다. 컨텐츠 재생 장치는 이전 정보에 현재 정보를 추가할 수 있다. 컨텐츠 재생 장치는 복수 개의 시간 정보 및 프로그램 정보가 축적되면 컨텐츠 재생 장치의 사용 정보 히스토리가 될 수 있다.
도 6은 외부 장치의 히스토리 정보의 다른 실시 예를 설명하는 도면이다.
도 6에 따르면, 날짜 정보, 시간 정보, 횟수 정보를 포함하는 히스토리 정보가 도시되어 있다. 도 6은 양념통과 같은 외부 장치에 대한 사용 정보의 일 실시 예일 수 있다.
양념통과 같은 외부 장치도 센서 모듈 및 통신 모듈을 포함할 수 있다. 센서 모듈은 양념통의 동작, 시간, 위치 등을 감지할 수 있다. 예를 들어, 양념통은 사용된 시점의 사용 시간 및 횟수 정보를 감지할 수 있다. 양념통이 10월26일 오전 7시에 2회 사용된 경우, 양념통은 날짜: 10월26일, 시간: 07시, 사용횟수: 2회라는 정보를 감지하여 저장하거나 서버로 전송할 수 있다. 이후에 양념통은 10월26일 오전 11시40분에 1회 사용된 경우, 양념통은 날짜: 10월26일, 시간: 11시40분, 사용횟수: 1회라는 정보를 감지하여 저장하거나 서버로 전송할 수 있다. 감지된 사용 정보가 누적되면 양념통의 사용 정보 히스토리가 될 수 있다.
상술한 바와 같이, 외부 장치는 감지된 정보를 저장하거나 서버로 전송할 수 있다. 단말 장치는 외부 장치가 포함된 사진을 촬영할 수 있다. 단말 장치는 사진 내의 외부 장치를 감지하고, 감지된 외부 장치의 정보를 요청할 수 있다. 요청받은 외부 장치의 정보를 수신한 단말 장치는 외부 장치 선택 명령에 따라 외부 장치와 관련된 정보를 디스플레이할 수 있다.
아래에서는 구체적인 실시 예에 대해서 설명한다.
도 7은 외부 장치의 히스토리 정보를 이용하는 제1 실시 예를 설명하는 도면이다.
도 7(a)를 참조하면, 외부 장치를 촬영한 사진을 디스플레이하는 단말 장치가 도시되어 있다. 도 7(a)는 요리 도구들을 촬영한 사진으로서 여러 가지 요리 도구들이 포함되어 있다. 사진은 촬영된 시간 정보를 표시할 수 있다. 도 7(a)의 경우, 10월26일 11시41분에 촬영된 사진이다.
사진을 촬영한 단말 장치는 사진 내의 외부 장치를 감지하고 외부 장치의 식별 정보 등을 수신하여 사진에 삽입시킬 수 있다. 따라서, 사용자가 사진 내의 외부 장치를 선택하면 단말 장치는 선택된 외부 장치의 식별 정보에 기초하여 사용 정보를 표시할 수 있다. 또는, 사진에는 외부 장치의 식별 정보만이 삽입될 수도 있다. 단말 장치는 사진 내의 외부 장치가 선택되면 선택된 외부 장치의 정보를 요청할 수 있다. 단말 장치는 외부 장치에 대한 정보를 요청할 때 히스토리 정보 전체를 요청할 수 있고, 특정 시점의 정보를 요청할 수 있다. 예를 들어, 단말 장치는 선택된 외부 장치가 생성한 모든 히스토리 정보를 수신할 수 있다. 또는, 단말 장치는 사진이 촬영된 시간 정보를 전송하여 전송된 시간에 대응되는 정보를 요청할 수도 있다. 이 경우, 단말 장치는 필요한 시점의 정보를 매번 요청할 수 있다. 도 7(a)의 예에서, 단말 장치는 사진 내의 양념통(201)에 대한 선택 명령을 입력받을 수 있다.
도 7(b)를 참조하면, 선택된 외부 장치에 대한 정보가 디스플레이된 화면이 도시되어 있다.
단말 장치는 양념통(201)이 선택되면 선택된 양념통(201)에 대한 정보를 요청할 수 있다. 상술한 바와 같이, 단말 장치는 양념통(201)과 직접 통신을 수행하여 정보를 수신할 수도 있고, 서버에게 정보를 요청할 수도 있다. 양념통(201) 또는 서버는 도 6에서 도시한 사용 히스토리와 같은 정보를 단말 장치로 전송할 수 있다.
일 실시 예로서, 단말 장치는 사진이 촬영된 시간을 기초로 수신한 정보를 디스플레이할 수 있다. 도 6에 도시된 양념통(201)의 사용 정보를 보면, 양념통(201)은 10월26일 7시에 2회 사용, 10월26일 11시40분에 1회 사용, 10월26일 11시47분에 3회 사용되었다. 단말 장치는 사진이 촬영된 시간을 기초로 양념통(201)의 사용 정보를 디스플레이할 수 있다. 도 7의 사진이 촬영된 시점은 10월26일 11시41분이다. 따라서, 단말 장치는 사진이 촬영된 시점에 양념통(201)이 가지고 있던 정보인 10월26일 11시40분 1회 사용이라는 정보를 디스플레이할 수 있다. 또한, 단말 장치는 양념통(201)에 들어있는 양념의 성분 정보를 함께 표시할 수 있다.
단말 장치는 선택된 양념통(201) 주변의 일 영역에 양념통(201)의 정보를 디스플레이할 수 있다. 한편, 단말 장치는 현재 표시된 정보 전후에 다른 정보가 더 존재하면 전후 선택 지시자(12, 13)를 표시할 수 있다. 즉, 단말 장치는 표시된 정보의 전후 정보를 선택할 수 있는 지시자(12, 13)을 더 표시할 수 있다. 단말 장치는 선택된 지시자(12, 13)에 기초하여 대응되는 동작을 수행할 수 있다.
도 7(c)를 참조하면 선택된 지시자에 대응한 정보를 디스플레이하는 단말 장치가 도시되어 있다. 이전 정보 표시 지시자(12)가 선택되면, 단말 장치는 이전의 양념통(201) 정보를 표시할 수 있다. 즉, 현재 표시되는 정보가 '10월26일, 11시40분, 1회 사용'이므로 '10월26일, 7시, 2회 사용'이 표시될 수 있다. 도 7(c)에서는 이후 정보 표시 지시자(13)가 선택되었다. 따라서, 단말 장치는 '10월26일, 11시47분, 3회 사용'이라는 정보(116)가 표시될 수 있다. 단말 장치는 이전 정보 표시 지시자(12)의 선택에 대응하여 표시되는 정보의 이전 정보를 표시할 수 있고, 이후 정보 표시 지시자(13)의 선택에 대응하여 표시되는 정보의 이후 정보를 표시할 수 있다.
도 8은 외부 장치의 히스토리 정보를 이용하는 제2 실시 예를 설명하는 도면이다.
도 8(a)를 참조하면, 촬영된 사진을 디스플레이하는 단말 장치가 도시되어 있다. 촬영된 사진은 차량(202)를 포함하고 있다. 차량(202)도 정보를 감지하고 네트워크에 연결되는 외부 장치에 포함될 수 있다. 사진을 촬영한 단말 장치는 사진 내의 외부 장치를 감지하고 외부 장치의 식별 정보 등을 수신하여 사진에 삽입시킬 수 있다. 사진 내의 외부 장치가 선택되면, 단말 장치는 선택된 외부 장치의 식별 정보에 기초하여 사용 정보를 표시할 수 있다. 또는, 사진에는 외부 장치의 식별 정보만이 삽입될 수도 있다. 단말 장치는 사진 내의 외부 장치가 선택되면 선택된 외부 장치의 정보를 요청할 수 있다. 도 8(a)에 도시된 바와 같이, 단말 장치는 사진 내의 차량(202)에 대한 선택 명령을 입력받을 수 있다.
도 8(b)를 참조하면, 선택된 외부 장치에 대한 정보가 디스플레이된 화면이 도시되어 있다. 단말 장치는 차량(202)이 선택되면 선택된 차량(202)에 대한 정보를 요청할 수 있다. 단말 장치는 차량(202)과 직접 통신을 수행하여 정보를 수신할 수도 있고, 서버에게 정보를 요청할 수도 있다.
단말 장치는 사진이 촬영된 시간을 기초로 수신한 정보를 디스플레이할 수 있다. 예를 들어, 차량(202)은 시간 정보, 위치 정보, 경로 정보, 속도 정보, 날씨 정보, 온도 정보 등을 감지할 수 있다. 단말 장치는 차량(202)이 감지한 정보를 서버 또는 차량(202)으로부터 수신할 수 있다. 단말 장치는 수신한 차량(202)의 정보를 적어도 하나 디스플레이할 수 있다. 일 실시 예로서, 단말 장치는 차량(202)이 표시된 근처에 차량이라는 종류 정보, 날짜 정보, 시간 정보, 위치 정보를 포함하는 차량 감지 정보(15)를 표시할 수 있다. 단말 장치가 표시하는 차량 감지 정보(15)는 사진이 촬영된 시점의 정보일 수 있다.
단말 장치는 전후 정보를 선택할 수 있는 지시자를 더 표시할 수 있다. 도 7에서 설명한 바와 같이, 단말 장치는 선택된 지시자에 기초하여 대응되는 동작을 수행할 수 있다. 단말 장치는 표시된 차량 감지 정보(15)에 대한 선택 명령을 입력받을 수 있다.
도 8(c)를 참조하면 전체 경로 정보가 디스플레이된 화면이 도시되어 있다. 단말 장치는 표시된 차량 감지 정보(15)에 대한 선택 명령을 입력받을 수 있다. 선택 명령을 입력받은 단말 장치는 전체 경로 정보를 표시한 화면(2)을 디스플레이할 수 있다. 단말 장치는 차량(202)의 이동 경로 정보를 지도에 대응시켜 표시할 수 있다. 또한, 단말 장치는 사진이 촬영된 지점의 위치도 별도로 표시할 수 있다. 만일, 사용자가 여행 중간에 사진을 촬영하고 표시된 차량 감지 정보(15)에 대한 선택 명령을 단말 장치에 입력한다면, 차량(202)은 일부 경로에 대한 정보만을 감지하였으므로 명령을 입력받은 순간까지 감지된 경로에 대한 정보만을 표시할 수 있다. 만일, 사용자가 여행을 완료한 후 표시된 차량 감지 정보(15)에 대한 선택 명령을 단말 장치에 입력한다면, 차량(202)은 도 8(c)에 도시된 바와 같이 전체 경로에 대한 정보를 표시할 수 있다.
도 9는 외부 장치의 히스토리 정보를 이용하는 제3 실시 예를 설명하는 도면이다.
도 9(a)를 참조하면, 촬영된 사진을 디스플레이하는 단말 장치가 도시되어 있다. 촬영된 사진은 오디오 플레이어(203)를 포함하고 있다. 도 9(a)에는 오디오 플레이어(203)가 도시되어 있다. 오디오 플레이어(203)는 음악 컨텐츠를 재생하는 컨텐츠 재생 장치의 일종이다. 단말 장치가 사진 내에 포함된 외부 장치를 감지하고 필요한 정보를 송수신하는 과정은 위에서 설명하였으므로 생략한다. 사용자는 촬영된 사진 내에 포함된 오디오 플레이어(203)를 선택할 수 있다.
도 9(b)를 참조하면, 선택된 외부 장치에 대한 정보가 디스플레이된 화면이 도시되어 있다. 단말 장치는 오디오 플레이어(203)가 선택되면 선택된 오디오 플레이어(203)에 대한 정보를 요청할 수 있다. 단말 장치는 오디오 플레이어(203) 또는 서버로부터 요청한 오디오 플레이어(203)에 대한 정보를 수신할 수 있다. 일 실시 예로서, 오디오 플레이어(203)에 대한 정보는 종류 정보, 청취 시간 정보, 재생한 컨텐츠에 대한 정보, 턴-온 정보, 턴-오프 정보 등을 포함할 수 있다. 단말 장치는 오디오 플레이어(203)에 대한 히스토리 정보를 수신할 수 있다. 즉, 단말 장치는 정보를 요청한 시점까지의 오디오 플레이어(203)에 대한 정보를 수신할 수 있다. 단말 장치는 수신한 오디오 플레이어(203)에 대한 히스토리 정보 중 사진이 촬영된 시점의 오디오 플레이어(203)에 대한 정보(17)를 디스플레이할 수 있다. 단말 장치는 전후 정보를 선택할 수 있는 지시자를 함께 디스플레이할 수 있다.
경우에 따라, 단말 장치는 오디오 플레이어(203)에 대한 정보를 요청할 때 특정 시점의 정보를 요청할 수 있다. 예를 들어, 단말 장치는 사진이 촬영된 시간 정보를 전송하여 전송된 시간에 대응되는 정보를 요청할 수 있다. 즉, 단말 장치는 매번 필요한 시점의 정보를 요청할 수 있다. 또는, 단말 장치는 오디오 플레이어(203)에 대한 모든 히스토리 정보를 요청할 수 있다. 즉, 단말 장치는 한번에 오디오 플레이어(203)에 대한 정보를 요청할 수 있다. 표시된 오디오 플레이어(203)에 대한 정보는 선택될 수 있다.
도 9(c)를 참조하면, 오디오 플레이어에 대한 정보가 선택되었을 때 단말 장치의 동작이 도시되어 있다.
표시된 오디오 플레이어에 대한 정보(17)가 선택되면, 단말 장치는 표시된 컨텐츠를 재생할 수 있다. 단말 장치는 오디오 플레이어에 대한 정보(17)를 요청할 때 컨텐츠를 함께 수신할 수 있다. 단말 장치는 수신된 컨텐츠를 재생할 수 있다. 또는, 표시된 오디오 플레이어에 대한 정보(17)가 선택되면, 단말 장치는 외부 장치 또는 서버로 컨텐츠를 요청할 수 있다. 외부 장치 또는 서버는 컨텐츠를 단말 장치로 전송할 수 있다. 단말 장치는 수신한 컨텐츠를 저장한 후 재생하거나 스트리밍으로 재생할 수 있다. 또한, 컨텐츠를 전송하는 서버는 오디오 플레이어에 대한 정보를 저장하는 서버와 동일한 서버일 수 있고 별개의 서버일 수도 있다.
상술한 바와 같이, 단말 장치가 오디오 플레이어에 대한 정보를 수신할 때 전후 정보가 존재하면 선택 지시자를 함께 디스플레이할 수 있다. 단말 장치는 선택 지시자의 선택에 대응하여 표시된 컨텐츠의 이전 또는 이후에 재생한 컨텐츠 정보를 표시할 수 있다.즉, 단말 장치는 사진에 포함된 외부 장치가 재생했었던 컨텐츠의 리스트 정보를 수신하여 사용자의 선택에 따라 하나씩 표시할 수 있다. 단말 장치는 컨텐츠 리스트 중 하나의 컨텐츠가 선택되면, 선택된 컨텐츠를 요청하여 수신할 수 있다. 단말 장치는 수신한 컨텐츠를 재생할 수 있다.
도 10은 외부 장치의 히스토리 정보를 이용하는 제4 실시 예를 설명하는 도면이다.
도 10에 따르면, 단말 장치(100)와 외부 장치(200)가 도시되어 있다. 외부 장치(200)는 컨텐츠 재생 장치일 수 있다. 상술한 바와 같이, 촬영된 사진에 포함된 외부 장치가 선택되면, 단말 장치(100)는 외부 장치 정보를 수신하고 디스플레이할 수 있다. 디스플레이된 외부 장치 정보를 선택하면 단말 장치(100)는 외부 장치 정보에 포함된 컨텐츠를 수신하여 재생할 수 있다.
한편, 단말 장치는 외부 장치 정보에 포함된 컨텐츠를 외부 장치(203)에서 재생하도록 제어할 수 있다. 일 실시 예로서, 표시된 외부 장치 정보를 선택하면 단말 장치(100)는 재생할 장치를 선택하는 메뉴를 디스플레이할 수 있다. 재생 장치 선택 메뉴는 단말 장치(100) 및 외부 장치(203)를 포함할 수 있다. 경우에 따라, 다른 외부 장치가 더 포함될 수 있다. 또는, 외부 장치(203)가 일정 거리 이내에 존재하지 않는 경우, 단말 장치(100)는 재생 장치 선택 메뉴를 표시하지 않고 단말 장치(100)에서 재생할 수 있다. 즉, 단말 장치(100)로부터 일정 거리 이내에 외부 장치(203)가 존재하는 경우, 단말 장치(100)는 재생 장치 선택 메뉴를 표시할 수 있다.
외부 장치 선택 메뉴에서 외부 장치(203)가 선택되면, 단말 장치(100)는 외부 장치(203)로 컨텐츠 재생 명령을 전송할 수 있다. 외부 장치(203)는 단말 장치의 명령에 따라 컨텐츠를 재생할 수 있다. 경우에 따라, 외부 장치(203)는 단말 장치로부터 명령을 받으면 서버에 컨텐츠를 요청할 수 있다. 외부 장치(203)는 서버로부터 컨텐츠를 수신하면 수신된 컨텐츠를 재생할 수 있다. 또는, 단말 장치(100)는 서버로 외부 장치(203), 컨텐츠, 재생 명령을 전송할 수 있다. 서버는 외부 장치(203)로 컨텐츠, 재생 명령을 전송하고, 외부 장치(203)는 수신한 컨텐츠를 재생할 수도 있다.
한편, 컨텐츠 재생 장치는 오디오 플레이어, TV, PC, 스마트폰, 랩탑 컴퓨터, 태블릿 PC, 게임기 등을 포함할 수 있다. 따라서, 컨텐츠는 음원, 동영상 및 게임을 포함할 수 있다.
도 11은 외부 장치의 히스토리 정보를 이용하는 제5 실시 예를 설명하는 도면이다.
도 11(a)를 참조하면, 외부 장치(204)를 포함하는 사진을 디스플레이하는 단말 장치가 도시되어 있다. 외부 장치(204)는 TV일 수 있다. TV는 동영상 또는 방송 컨텐츠를 재생하는 컨텐츠 재생 장치의 일종이다. 단말 장치는 사진 내에 포함된 외부 장치(204)를 감지할 수 있다. 단말 장치는 사진에 포함된 외부 장치(204)의 선택을 받을 수 있다.
도 11(b)를 참조하면, 선택된 외부 장치(204)에 대한 정보가 디스플레이된 화면이 도시되어 있다. 단말 장치는 외부 장치(204)가 선택되면 선택된 외부 장치에 대한 정보를 요청할 수 있다. 실시 예에 따라, 선택된 외부 장치에 대한 정보는 외부 장치(204)로부터 수신될 수 있고, 서버로부터 수신될 수 있다. 일 실시 예로서, TV에 대한 정보는 종류 정보, 방송 시간 정보, 방송 프로그램을 포함한 컨텐츠에 대한 정보, 턴-온 정보, 턴-오프 정보, 시청 시간 정보 등을 포함할 수 있다. 단말 장치는 수신한 외부 장치에 대한 정보(19)를 디스플레이할 수 있다. 수신한 외부 장치에 대한 정보는 사진이 촬영된 시점의 정보일 수 있다. 단말 장치는 전후 정보를 선택할 수 있는 지시자를 함께 디스플레이할 수 있다. 표시된 외부 장치에 대한 정보(19)는 선택될 수 있다.
도 11(c)를 참조하면, 외부 장치에 대한 정보가 선택되었을 때 단말 장치의 동작이 도시되어 있다.
표시된 외부 장치에 대한 정보(19)가 선택되면, 단말 장치는 표시된 컨텐츠(4)를 재생할 수 있다. 단말 장치는 외부 장치에 대한 정보(19)를 요청할 때 컨텐츠를 함께 수신할 수 있다. 단말 장치는 컨텐츠를 수신하여 재생할 수 있다. 또는, 표시된 외부 장치에 대한 정보(19)가 선택되면, 단말 장치는 외부 장치 또는 서버로 컨텐츠를 요청할 수 있다. 외부 장치 또는 서버는 컨텐츠를 단말 장치로 전송할 수 있다. 단말 장치는 컨텐츠를 수신하여 재생할 수 있다.
경우에 따라, 동영상 컨텐츠는 크기가 크거나 저작권과 연관되어 있을 수 있다. 따라서, 정보(19)에 포함된 컨텐츠는 컨텐츠 자체가 아닌 미리보기 서비스 또는 요약 서비스로 제공될 수도 있다.
도 12는 외부 장치의 히스토리 정보를 이용하는 제6 실시 예를 설명하는 도면이다.
도 12(a)를 참조하면, 외부 장치(206)가 포함된 사진을 디스플레이하는 단말 장치가 도시되어 있다. 외부 장치(206)는 전자 액자일 수 있다. 전자 액자도 이미지를 디스플레이하는 컨텐츠 재생 장치의 일종이다. 외부 장치(206)는 사진이 촬영된 시점에 디스플레이했던 이미지를 표시하고 있다. 단말 장치는 사진 내에 포함된 외부 장치(206)를 감지할 수 있다. 단말 장치는 사진에 포함된 외부 장치(206)에 대한 선택을 받을 수 있다.
도 12(b)를 참조하면, 선택된 외부 장치(206)에 대한 정보가 디스플레이된 화면이 도시되어 있다. 단말 장치는 외부 장치(206)가 선택되면 선택된 외부 장치에 대한 정보를 요청할 수 있다. 일 실시 예로서, 전자 액자에 대한 정보는 종류 정보, 디스플레이하는 이미지 정보, 디스플레이하는 시간 정보 등을 포함할 수 있다. 단말 장치는 수신한 외부 장치에 대한 정보(21)를 디스플레이할 수 있다. 수신한 외부 장치에 대한 정보는 사진이 촬영된 시점의 정보일 수 있다. 도 12(b)에는 사진을 촬영한 시점에 전자 액자에 디스플레이되는 이미지를 포함한다. 그리고, 전자 액자에 디스플레이되는 이미지에 대한 정보를 포함한다. 즉, 종류 정보로서 액자, 이미지의 디스플레이 시간 정보로서 10월31일 11시10분이라는 정보가 표시될 수 있다. 외부 장치에 대한 정보는 선택될 수 있다.
도 12(c)를 참조하면, 외부 장치에 대한 정보가 선택되었을 때 단말 장치의 동작이 도시되어 있다. 외부 장치에 대한 정보가 선택되면, 선택된 외부 장치(206)가 디스플레이했던 이미지 리스트가 표시될 수 있다. 이미지 리스트는 단말 장치 화면의 상단부, 하단부, 좌우측면부 중 하나의 영역에 디스플레이될 수 있다. 도 12(c)에 따르면 이미지 리스트는 단말 장치 화면 하단에 표시되어 있다. 외부 장치(206)은 제1 이미지(22a), 제2 이미지(22b), 제3 이미지(22c), 제4 이미지(22d), 제5 이미지(22e)를 디스플레이했으므로 단말 장치의 화면에 제1 이미지(22a), 제2 이미지(22b), 제3 이미지(22c), 제4 이미지(22d), 제5 이미지(22e)가 표시될 수 있다. 사진이 촬영된 시점에 외부 장치(206)이 표시했던 이미지는 제3 이미지(22c)이다. 외부 장치(206)가 디스플레이했던 이미지는 더 존재할 수 있다. 외부 장치(206)가 디스플레이했던 이미지 갯수가 단말 장치 화면에 표시된 이미지 갯수보다 많으면 단말 장치는 제1 이미지(22a)의 좌측 또는 제5 이미지(22e)의 우측에 배치하고 스크롤을 통해 표시할 수 있다. 외부 장치(206)의 이미지 리스트 중 하나의 이미지가 선택될 수 있다.
도 12(d)를 참조하면, 하나의 이미지가 선택되었을 때 단말 장치의 동작이 도시되어 있다. 단말 장치는 하나의 이미지가 선택되면 표시했던 이미지 리스트를 사라지게 할 수 있다. 그리고, 단말 장치는 선택된 이미지를 전자 액자 위치에 표시할 수 있다. 즉, 단말 장치는 선택된 이미지와 외부 장치(206)가 포함된 사진을 합성할 수 있다. 도 12(d)에 따르면, 제4 이미지(22d)가 선택되었으므로 이미지 리스트는 사라진다. 그리고, 외부 장치(206) 영역에는 제3 이미지(22c) 대신 제4 이미지(22d)로 변경되어 표시될 수 있다.
도 13은 타인의 외부 장치에게 정보를 요청하는 실시 예를 설명하는 도면이다.
도 13(a)를 참조하면, 외부 장치(207)가 포함된 사진을 디스플레이하는 단말 장치가 도시되어 있다. 단말 장치는 사진 내에 포함된 외부 장치(207)를 감지할 수 있다. 그리고, 단말 장치는 사진에 포함된 외부 장치(207)에 대한 선택을 받을 수 있다. 외부 장치(207)을 감지하기 위해 단말 장치가 수신한 정보 중에는 권한 정보 또는 소유자 정보를 포함할 수 있다. 예를 들어, 권한 정보는 비밀, 조건부 공유, 전체 공유 속성 값을 가질 수 있다. 소유자 정보는 개인 식별 값을 가질 수 있다. 사진에 포함된 외부 장치(207)의 소유자는 타인일 수 있다. 이 경우, 단말 장치는 타인 소유의 외부 장치 정보를 무단으로 전송받을 수 없다.
도 13(b)를 참조하면, 선택된 외부 장치(207)가 타인 소유인 경우, 단말 장치의 동작을 설명한다. 단말 장치는 사진 내에 포함된 외부 장치(207)를 감지할 때 소유자 정보를 확인할 수 있다. 또는, 단말 장치는 사진 내에 포함된 외부 장치(207)가 선택될 때 소유자 정보를 확인할 수 있다. 경우에 따라, 단말 장치는 권한 정보를 기초로 외부 장치의 정보 사용 권한을 확인할 수도 있다.
사진 내에 포함된 외부 장치(207)가 선택되고 외부 장치(207)의 소유자가 타인인 것으로 확인되면, 단말 장치는 외부 장치의 소유자에게 정보를 요청하는 신호를 송신할 수 있다. 예를 들어, 정보를 요청하는 신호는 소유자가 오랜 시간 소지하는 단말 장치로 보낼 수 있다. 외부 장치 소유자의 응답을 기다리는 동안, 단말 장치는 메시지(24)를 표시할 수 있다. 예를 들어, '소유자에게 정보 요청 중'이라는 메시지(24)를 표시할 수 있다. 단말 장치가 외부 장치의 소유자로부터 허락하는 응답을 수신하면, 외부 장치의 정보를 수신하여 표시할 수 있다. 단말 장치가 외부 장치의 소유자로부터 불허하는 응답을 수신하면, 외부 장치의 정보 요청 동작은 중지될 수 있다.
상술한 다양한 실시 예에 따라, 단말 장치는 외부 장치의 정보를 표시하고 외부 장치의 정보를 이용할 수 있다.
도 14는 일 실시 예에 따른 단말 장치의 제어 방법의 흐름도이다.
도 14에 따르면, 단말 장치는 네트워크에 연결된 외부 장치가 포함된 사진을 촬영할 수 있다(S1410). 단말 장치는 촬영된 사진으로부터 외부 장치를 감지할 수 있다(S1420). 단말 장치는 촬영된 사진에 포함된 외부 장치의 외형 정보를 추출하고, 매칭되는 주변 외부 장치의 외형 정보 또는 서버에 저장된 외부 장치의 외형 정보를 검색할 수 있다. 단말 장치는 매칭되는 외부 장치의 외형 정보를 기초로 사진 내의 외부 장치를 인식할 수 있다.
단말 장치는 촬영된 사진 내의 감지된 외부 장치가 선택될 때, 외부 장치의 센싱 히스토리를 기반으로 외부 장치의 정보를 수신할 수 있다(S1430). 단말 장치는 외부 장치의 정보를 수신할 수 있다. 외부 장치의 정보는 촬영된 시점의 정보일 수 있다. 단말 장치는 촬영된 시점의 정보와 함께 히스토리 정보를 수신할 수 있다. 또는 단말 장치는 사진 내의 외부 장치가 선택된 시점에 히스토리 정보를 수신할 수도 있다. 즉, 단말 장치는 촬영된 시점 이전 정보 및 촬영된 시점 이후 정보를 수신할 수 있다.
단말 장치는 수신된 외부 장치의 정보를 표시할 수 있다(S1440). 수신된 외부 장치의 정보는 선택될 수 있다. 수신된 외부 장치의 정보가 선택되면, 단말 장치는 컨텐츠 재생, 전체 경로 표시, 이미지 리스트 표시 등과 같은 동작을 수행할 수 있다. 한편, 외부 장치가 포함된 사진의 촬영 과정과 외부 장치의 정보를 수신하여 표시 과정은 서로 다른 단말 장치에서 수행될 수 있다.
본 명세서에 따른 단말 장치 및 제어 방법은 상술한 실시 예들의 구성과 방법으로 한정되어 적용되는 것이 아니라, 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 다양한 변형이 이루어질 수 있다.
한편, 본 명세서의 단말 장치의 제어 방법은 단말 장치에서 구비된 프로세서가 읽을 수 있는 기록 매체에 소프트웨어로서 구현되는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 명세서의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 명세서는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 명세서의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
100 : 단말 장치 110 : 카메라부
120 : 통신부 130 : 디스플레이부
140 : 제어부 150 : 입력부
160 : 오디오부 170 : 센서부
180 : 저장부 190 : 파워부
200 : 외부 장치 300 : 서버

Claims (20)

  1. 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하는 카메라부;
    상기 촬영된 사진으로부터 상기 외부 장치를 감지하는 제어부;
    데이터를 송수신하는 통신부; 및
    상기 촬영된 사진을 디스플레이하는 디스플레이부;를 포함하며,
    상기 제어부는,
    상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 외부 장치의 정보를 상기 디스플레이부에 표시하도록 상기 디스플레이부를 제어하는, 단말 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    기 설정된 거리 이내의 상기 외부 장치로부터 태깅 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 태깅 정보를 기초로 상기 외부 장치를 감지하는 것을 특징으로 하는 단말 장치.
  3. 제2항에 있어서,
    상기 태깅 정보는,
    상기 외부 장치의 고유 정보, 식별 정보, 위치 정보, 권한 정보 및 소유자 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 단말 장치.
  4. 제1항에 있어서,
    상기 제어부는,
    상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 사진이 촬영된 시점의 상기 외부 장치의 정보를 수신하도록 상기 통신부를 제어하는 것을 특징으로 하는 단말 장치.
  5. 제4항에 있어서,
    상기 제어부는,
    상기 촬영된 시점 이전 정보 및 상기 촬영된 시점 이후 정보 중 적어도 하나의 정보를 더 수신하도록 상기 통신부를 제어하는 것을 특징으로 하는 단말 장치.
  6. 제5항에 있어서,
    상기 제어부는,
    상기 표시된 정보의 전후 정보를 선택하는 지시자를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  7. 제1항에 있어서,
    상기 외부 장치의 정보는,
    상기 외부 장치의 사용 정보, 이동 경로 정보, 위치 정보, 컨텐츠 정보 및 리스트 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 단말 장치.
  8. 제7항에 있어서,
    상기 제어부는,
    상기 외부 장치가 차량인 경우, 상기 사진이 촬영된 시점의 위치 정보를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  9. 제8항에 있어서,
    상기 제어부는,
    상기 차량의 이동 경로 정보를 지도 상에서 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  10. 제7항에 있어서,
    상기 제어부는,
    상기 외부 장치가 컨텐츠 재생 장치인 경우, 상기 사진이 촬영된 시점의 컨텐츠 정보를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  11. 제10항에 있어서,
    상기 제어부는,
    상기 컨텐츠 재생 장치가 재생한 컨텐츠의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 컨텐츠의 리스트 정보 중 하나의 컨텐츠가 선택될 때, 상기 선택된 컨텐츠를 재생하는 것을 특징으로 하는 단말 장치.
  12. 제10항에 있어서,
    상기 제어부는,
    상기 컨텐츠 재생 장치가 재생한 컨텐츠의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 컨텐츠의 리스트 정보 중 하나의 컨텐츠가 선택될 때, 상기 선택된 컨텐츠의 재생 명령을 상기 컨텐츠 재생 장치로 전송하도록 상기 통신부를 제어하는 것을 특징으로 하는 단말 장치.
  13. 제11항에 있어서,
    상기 컨텐츠는,
    음원, 동영상 및 게임 중 적어도 하나인 것을 특징으로 하는 단말 장치.
  14. 제7항에 있어서,
    상기 제어부는,
    상기 외부 장치가 스마트 액자인 경우, 상기 사진이 촬영된 시점의 상기 스마트 액자에 표시된 이미지의 정보를 표시하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  15. 제14항에 있어서,
    상기 제어부는,
    상기 스마트 액자가 디스플레이한 이미지의 리스트 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 이미지의 리스트 정보 중 하나의 이미지가 선택될 때, 상기 선택된 이미지를 상기 사진과 합성하여 디스플레이하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 단말 장치.
  16. 제3항에 있어서,
    상기 제어부는,
    상기 외부 장치의 소유자 정보를 기초로 상기 외부 장치의 소유자를 판단하고, 상기 외부 장치가 타인 소유일 때, 상기 외부 장치의 소유자에게 상기 외부 장치의 데이터를 요청하는 것을 특징으로 하는 단말 장치.
  17. 네트워크에 연결된 외부 장치가 포함된 사진을 촬영하고, 상기 촬영된 사진으로부터 상기 외부 장치를 감지하며, 상기 촬영된 사진을 디스플레이하고, 상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 요청하는 단말 장치; 및
    상기 단말 장치의 요청에 따라 상기 외부 장치의 정보를 상기 단말 장치로 전송하는 외부 장치;를 포함하며,
    상기 단말 장치는,
    상기 외부 장치의 정보를 수신하여 표시하는, 정보 표시 시스템.
  18. 단말 장치의 제어 방법에 있어서,
    네트워크에 연결된 외부 장치가 포함된 사진을 촬영하는 단계;
    상기 촬영된 사진으로부터 상기 외부 장치를 감지하는 단계;
    상기 촬영된 사진 내의 상기 감지된 외부 장치가 선택될 때, 상기 외부 장치의 센싱 히스토리를 기반으로 상기 외부 장치의 정보를 수신하는 단계; 및
    상기 수신된 외부 장치의 정보를 표시하는 단계;를 포함하는 단말 장치의 제어 방법.
  19. 제18항에 있어서,
    상기 외부 장치의 정보를 수신하는 단계는,
    상기 사진이 촬영된 시점의 상기 외부 장치의 정보를 수신하는 것을 특징으로 하는 단말 장치의 제어 방법.
  20. 제19항에 있어서,
    상기 외부 장치의 정보를 수신하는 단계는,
    상기 촬영된 시점 이전 정보 및 상기 촬영된 시점 이후 정보 중 적어도 하나의 정보를 더 수신하는 것을 특징으로 하는 단말 장치의 제어 방법.
KR1020140174695A 2014-12-08 2014-12-08 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법 KR102302327B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140174695A KR102302327B1 (ko) 2014-12-08 2014-12-08 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법
PCT/KR2015/000429 WO2016093420A1 (en) 2014-12-08 2015-01-15 Terminal device, information display system and method of controlling therefor
US14/604,306 US9332172B1 (en) 2014-12-08 2015-01-23 Terminal device, information display system and method of controlling therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140174695A KR102302327B1 (ko) 2014-12-08 2014-12-08 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법

Publications (2)

Publication Number Publication Date
KR20160069144A KR20160069144A (ko) 2016-06-16
KR102302327B1 true KR102302327B1 (ko) 2021-09-15

Family

ID=55807675

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140174695A KR102302327B1 (ko) 2014-12-08 2014-12-08 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법

Country Status (3)

Country Link
US (1) US9332172B1 (ko)
KR (1) KR102302327B1 (ko)
WO (1) WO2016093420A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023085564A1 (ko) * 2021-11-15 2023-05-19 삼성전자 주식회사 전자 장치 및 전자 장치에서 외부 전자 장치의 컨텐트를 획득하는 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170086339A (ko) * 2016-01-18 2017-07-26 삼성전자주식회사 전자장치 및 그 제어방법
KR102624327B1 (ko) * 2019-03-15 2024-01-15 삼성전자주식회사 IoT 기기의 위치 추론 방법, 이를 지원하는 서버 및 전자 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100983912B1 (ko) 2008-04-04 2010-09-27 한국과학기술연구원 증강 현실 기법을 이용한 정보처리 장치 및 정보 입력,검색방법
US20140354760A1 (en) 2013-05-31 2014-12-04 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8218873B2 (en) * 2000-11-06 2012-07-10 Nant Holdings Ip, Llc Object information derived from object images
US7194109B2 (en) * 2001-08-30 2007-03-20 Hitachi Kokusai Electric, Inc. Method and system for delivering monitored image signal of subject to be monitored
JP2003150529A (ja) * 2001-11-19 2003-05-23 Hitachi Ltd 情報交換方法、情報交換端末装置、情報交換サーバ装置、プログラム
JP2005173784A (ja) * 2003-12-09 2005-06-30 Nec Corp 映像情報配信システム及び方法と装置並びにプログラム
US20050086690A1 (en) * 2003-10-16 2005-04-21 International Business Machines Corporation Interactive, non-intrusive television advertising
US7872669B2 (en) * 2004-01-22 2011-01-18 Massachusetts Institute Of Technology Photo-based mobile deixis system and related techniques
US8421872B2 (en) * 2004-02-20 2013-04-16 Google Inc. Image base inquiry system for search engines for mobile telephones with integrated camera
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US7775437B2 (en) * 2006-06-01 2010-08-17 Evryx Technologies, Inc. Methods and devices for detecting linkable objects
US20070288453A1 (en) * 2006-06-12 2007-12-13 D&S Consultants, Inc. System and Method for Searching Multimedia using Exemplar Images
US8634712B1 (en) * 2007-03-06 2014-01-21 Alex Robert Woods Real time transmission of photographic images from portable handheld devices
US20080268876A1 (en) * 2007-04-24 2008-10-30 Natasha Gelfand Method, Device, Mobile Terminal, and Computer Program Product for a Point of Interest Based Scheme for Improving Mobile Visual Searching Functionalities
JP5173475B2 (ja) * 2008-02-19 2013-04-03 キヤノン株式会社 リモートコントローラ装置、その制御方法及びプログラム
US8311556B2 (en) * 2009-01-22 2012-11-13 Htc Corporation Method and system for managing images and geographic location data in a mobile device
US8413188B2 (en) * 2009-02-20 2013-04-02 At&T Intellectual Property I, Lp System and method for processing image objects in video data
JP5529900B2 (ja) * 2009-03-11 2014-06-25 ソニー株式会社 表示画像から選択したアイテムのアイテム情報へのアクセス
US9008631B2 (en) * 2009-05-01 2015-04-14 T-Mobile Usa, Inc. Providing context information during voice communications between mobile devices, such as providing visual media
US8818274B2 (en) * 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device
KR20110118421A (ko) * 2010-04-23 2011-10-31 엘지전자 주식회사 증강 원격제어장치, 증강 원격제어장치 제어방법 및 그 시스템
KR101730881B1 (ko) * 2010-04-21 2017-04-27 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
US8789131B2 (en) * 2010-05-14 2014-07-22 Lg Electronics Inc. Electronic device and method of sharing contents thereof with other devices
US9111255B2 (en) * 2010-08-31 2015-08-18 Nokia Technologies Oy Methods, apparatuses and computer program products for determining shared friends of individuals
US9159298B2 (en) * 2010-09-08 2015-10-13 Lg Electronics Inc. Terminal and contents sharing method for terminal
KR101338818B1 (ko) * 2010-11-29 2013-12-06 주식회사 팬택 이동 단말기 및 이를 이용한 정보 표시 방법
KR20120067451A (ko) * 2010-12-16 2012-06-26 고스트리트(주) 사진 텍스트 인식기능을 구비한 지능형 모바일 장치 및 상기 지능형 모바일 장치에 의한 사진 텍스트 인식방법
KR101286358B1 (ko) * 2011-08-11 2013-07-15 엘지전자 주식회사 영상표시방법 및 장치
US20130120592A1 (en) * 2011-11-11 2013-05-16 John M. Bednarczyk Method for wireless sharing of images
JP5926550B2 (ja) * 2011-12-07 2016-05-25 キヤノン株式会社 印刷システム、情報処理端末、サーバ、制御方法、及びプログラム
US20130290439A1 (en) * 2012-04-27 2013-10-31 Nokia Corporation Method and apparatus for notification and posting at social networks
JP5708562B2 (ja) * 2012-05-30 2015-04-30 ヤマハ株式会社 オーディオ・ビデオ制御システム、携帯端末装置およびオーディオ・ビデオ制御プログラム
TW201401070A (zh) * 2012-06-29 2014-01-01 Quanta Comp Inc 資料傳輸系統和電子裝置
US20140019867A1 (en) * 2012-07-12 2014-01-16 Nokia Corporation Method and apparatus for sharing and recommending content
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
US20150154840A1 (en) * 2012-07-20 2015-06-04 Iwatchlife Inc. System and method for managing video analytics results
JP5955170B2 (ja) * 2012-09-06 2016-07-20 キヤノン株式会社 表示制御装置、表示制御方法、及びプログラム
US20140075348A1 (en) * 2012-09-11 2014-03-13 Nokia Corporation Method and apparatus for associating event types with place types
KR101517399B1 (ko) * 2012-09-26 2015-05-06 최용순 소리/향 발생장치, 모바일 단말기에서의 소리/향 발생장치 제어방법 및 모바일 단말기 및 소리/향 발생장치를 이용한 커뮤니케이션 시스템
KR20140087829A (ko) * 2012-12-31 2014-07-09 삼성전자주식회사 촬상 장치가 이동 통신 단말로부터 연결 정보를 수신하는 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 장치
US10257665B2 (en) 2013-02-25 2019-04-09 Qualcomm Incorporated Analytics engines for IoT devices
US9716965B2 (en) * 2013-04-27 2017-07-25 Lg Electronics Inc. Mobile terminal and controlling method thereof
JP6179231B2 (ja) * 2013-07-10 2017-08-16 株式会社リコー 端末装置、情報処理プログラム、情報処理方法および情報処理システム
US9530310B2 (en) * 2013-11-01 2016-12-27 Xerox Corporation Method and system for detecting and tracking a vehicle of interest utilizing a network of traffic image-capturing units
JP2015104078A (ja) * 2013-11-27 2015-06-04 オリンパス株式会社 撮像装置、撮像システム、サーバ、撮像方法、及び撮像プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100983912B1 (ko) 2008-04-04 2010-09-27 한국과학기술연구원 증강 현실 기법을 이용한 정보처리 장치 및 정보 입력,검색방법
US20140354760A1 (en) 2013-05-31 2014-12-04 Samsung Electronics Co., Ltd. Display apparatus and control method thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023085564A1 (ko) * 2021-11-15 2023-05-19 삼성전자 주식회사 전자 장치 및 전자 장치에서 외부 전자 장치의 컨텐트를 획득하는 방법

Also Published As

Publication number Publication date
WO2016093420A1 (en) 2016-06-16
KR20160069144A (ko) 2016-06-16
US9332172B1 (en) 2016-05-03

Similar Documents

Publication Publication Date Title
KR102653793B1 (ko) 비디오 클립 객체 추적
EP3410436A1 (en) Portable electronic device and method for controlling the same
US10187520B2 (en) Terminal device and content displaying method thereof, server and controlling method thereof
US20210382941A1 (en) Video File Processing Method and Electronic Device
KR101743192B1 (ko) 녹음방법, 재생방법, 장치, 단말기, 시스템, 프로그램 및 기록매체
KR102313755B1 (ko) 이동 단말기 및 그 제어 방법
US9678705B2 (en) Displaying information on wearable devices
CN106201391B (zh) 移动终端系统及其控制方法
JP6399748B2 (ja) コンテンツ再生装置、そのｕｉ提供方法、ネットワークサーバ及びその制御方法
US20150067521A1 (en) Method and apparatus for presenting content using electronic devices
US20140244738A1 (en) Device, System and Method for Generating Data
BR102013033429B1 (pt) Dispositivo terminal, e método para controlar um dispositivo terminal
US9961267B2 (en) Personal camera companion for real-time streaming
KR20150027892A (ko) 콘텐트 표현 방법 및 시스템
US20190012320A1 (en) Multimedia File Management Method, Electronic Device, And Graphical User Interface
KR102300042B1 (ko) 디스플레이 장치 및 제어 방법
KR20150083636A (ko) 전자 장치에서 이미지 운영 방법 및 장치
CN114356258A (zh) 电子设备及其投屏方法和介质
KR102268540B1 (ko) 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
US11223853B2 (en) Image display method and electronic device therefor
US20230291826A1 (en) Control Method Applied to Electronic Device and Electronic Device
KR102302327B1 (ko) 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법
CN112529645A (zh) 一种图片的布局方法及电子设备
EP3509315A1 (en) Image display method and electronic device therefor
KR20180076619A (ko) 스마트 페이지에서의 개체 추천 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant